Size: a a a

2020 January 27

AR

Andrey Rahmatullin in Scrapy
судя по доке, неохота код смотреть
источник

i

ildar in Scrapy
а как тогда передать сеттингс? два разных раннера создать?
источник

AR

Andrey Rahmatullin in Scrapy
Andrey Rahmatullin
сделать два раннера
:)
источник

i

ildar in Scrapy
нууу, в принципе и эта хрень сработала, с сеттингсами)
источник

AR

Andrey Rahmatullin in Scrapy
раннер же включает в себя всю машинерию с миддлварями и прочим, если надо поменять что-то, что только при инициализации задаётся, то только пересоздавать
источник

AR

Andrey Rahmatullin in Scrapy
а если нет то просто сунуть в кастом_сеттингс паука или инициализировать из аргумента
источник

i

ildar in Scrapy
походу как-то_оно_сработало.jpg, видать FEED_URI к таким параметрам не относится, щас я еще проверю...
источник

i

ildar in Scrapy
и заодно джва разных раннера создам. Все-равно все закешировалось)
источник

AR

Andrey Rahmatullin in Scrapy
FEED_URI, тем не менее, читается один раз, при создании scrapy.extensions.feedexport.FeedExporter
источник

i

ildar in Scrapy
хмммм, а то, что оно пишет для runner.crawl в  :param dict kwargs: keyword arguments to initialize the spider
это к сеттингсам не относится? они же тоже по-идее инициализируют паук, или что тут имеется в виду для паука тогда?
источник

i

ildar in Scrapy
щас посмотрю, по-идее если у меня бы не отработало и не создало первый файл - второй бы паук издох на старте еще
источник

МС

Михаил Синегубов in Scrapy
ildar
щас посмотрю, по-идее если у меня бы не отработало и не создало первый файл - второй бы паук издох на старте еще
так первый же у тебя по сути дефолтные значения взял..... по крайней мере, как ты писал очередность
источник

AR

Andrey Rahmatullin in Scrapy
ildar
хмммм, а то, что оно пишет для runner.crawl в  :param dict kwargs: keyword arguments to initialize the spider
это к сеттингсам не относится? они же тоже по-идее инициализируют паук, или что тут имеется в виду для паука тогда?
я как раз про это писал выше
источник

i

ildar in Scrapy
да, походу он тупо в 1 файл все это напихал
источник

i

ildar in Scrapy
и ничего не поменял
источник

AR

Andrey Rahmatullin in Scrapy
keyword arguments to initialize the spider это то, что передаётся в scrapy crawl через -a
источник

AR

Andrey Rahmatullin in Scrapy
и принимается в __init__
источник

i

ildar in Scrapy
ща я еще проверю, а то у меня тут они еще удаляются, уберу удаление и перепроверю
источник

AR

Andrey Rahmatullin in Scrapy
ещё можно лог почитать
источник

МС

Михаил Синегубов in Scrapy
перекрой пайп....
или экпортер.
точно не помню где имя задается, там же, вроде, можно это перекрыть....
источник