Телеграмм чат группы scrapy

лично я вообще не знаю, и с новым механизмом FEEDS еще не работал даже) поэтому и спросил как аналог того, что он делает в консоли, передается в scrapyd. Если "из консоли запускается, а через scrapyd нет", то явно там где-то проблема

источник

15:36пожаловаться #5

Andrey Rahmatullin in Scrapy

Сейчас я уже тоже не уверен не пытается ли он таки поюзать -о

источник

15:38пожаловаться #6

Andrey Rahmatullin in Scrapy

А FEEDS это просто замена пачки отдельных настроек

источник

15:38пожаловаться #7

Andrey Rahmatullin in Scrapy

(плюс возможность указать сразу несколько фидов)

источник

15:39пожаловаться #8

i in Scrapy

Семён Кашин

когда запускаю из консоли работает нормально. Но мне надо запускать через scrapyd

запусти через settings без scrapyd, чтобы у тебя не было -o доп.параметра. тогда ты задачу "не запускается через scrapyd" переведешь в задачу "не запускается при задании через settings. И scrapyd тут будет не причем)

источник

15:40пожаловаться #9

i in Scrapy

а спрашивал я т.к. когда пошел читать про этот https://docs.scrapy.org/en/latest/topics/feed-exports.html#std-setting-FEED_URI_PARAMS

источник

15:44пожаловаться #10

i in Scrapy

там в третьем пункте пишут что де:
Use %(spider_name)s in your feed URI:
scrapy crawl <spider_name> -o "%(spider_name)s.jl"

источник

15:44пожаловаться #11

Andrey Rahmatullin in Scrapy

Угу