Size: a a a

2020 January 06

SS

Sergey Sergey in Scrapy
Спасибо!
источник

R

Roma in Scrapy
дак проект надо написать а потом уж контейнер собрать
источник

SS

Sergey Sergey in Scrapy
Ато все решить не могу, в джангу сразу писать или отдельно в постгрю)
источник

АМ

Алексей Мелолян in Scrapy
Roma
И ето - на питоне надо использовать venv
а там же в начале строки стоит венв под названием (wiley_new)
источник

АМ

Алексей Мелолян in Scrapy
или это не оно?
источник

SS

Sergey Sergey in Scrapy
Roma
дак проект надо написать а потом уж контейнер собрать
Понял. Я просто с докером на Вы
источник

R

Roma in Scrapy
Я не вижу - я обычно создаю проект с папками - app и venv....в app как раз идет пайк и все что для проекта
источник

R

Roma in Scrapy
ну это дело твое - так просто совет
источник

АМ

Алексей Мелолян in Scrapy
а, ну я пока пользуюсь автонастройками пайчарма, он где-то в другом месте сохраняет венв
источник

МС

Михаил Синегубов in Scrapy
Народ, кто итемлоадерами пользуется, есть пара вопросов:
1. Нафига разделение на in/out обработчики?
2. В английском не силен, я правильно понял, что на вход обработчика может попасть как единичное значение, так и список? Или только список? (Мне свои обработчики надо будет написать)
3. В пайпе уже полностью обработанные значения айтема будут?
источник

AR

Andrey Rahmatullin in Scrapy
in обрабатывает каждый элемент, out обычно берёт первый или мержит
источник

AR

Andrey Rahmatullin in Scrapy
на вход подаётся то, что подаёшь в коде спайдера
источник

AR

Andrey Rahmatullin in Scrapy
ну, в in, в out подаётся списокм всё что собралось
источник

AR

Andrey Rahmatullin in Scrapy
в пайплайнах итемы после лоадеров, да
источник

МС

Михаил Синегубов in Scrapy
Угу, примерно понял, спс
источник

in Scrapy
источник

in Scrapy
Парни , как мне BaseCommand заставить считывать аргументы, которые я передаю в терминале, когда запускаю скраппер?

Запускать пытаюсь так: docker-compose run django python manage.py devices -a model='некий аргумент'
источник

AR

Andrey Rahmatullin in Scrapy
аргпарс, как
источник

AR

Andrey Rahmatullin in Scrapy
скрапи мне кажется аргпарс и юзает
источник
2020 January 07

Y

Yurii in Scrapy
Есть два проекта. Один был создан с помощью команды startproject, второй же был просто сгенерирован. Сравниваю проекты и они ничем не отличаются по настройкам. Первый проект нормально запускается, а второй не может найти ModuleNotFoundError: No module named 'test.settings'
при попытке запуска.
источник