Телеграмм чат группы scrapy

я про пакет с каким сравнивать

13:49пожаловаться #1

какая разница, простой list или redis и то и то в памяти

13:49пожаловаться #2

Кирилл

какая разница, простой list или redis и то и то в памяти

Ну редис зависимость

13:49пожаловаться #3

Лист нет )

13:49пожаловаться #4

Как запускаешь ?

13:50пожаловаться #5

Какой командой

Ну редис зависимость

ну, а у тебя монгой зависимость)

13:51пожаловаться #7

Кирилл

ну, а у тебя монгой зависимость)

У меня в листе)

хитрец

Конкретно мне нужно максимально бюджетных пауков делать

😔вынужден так делать

13:52пожаловаться #10

добавь ещё -t json на всякий случай, оно иногда не хочет брать расширений файла

13:52пожаловаться #11

покажи логи чуть выше, там есть эти итемы?

Михаил Синегубов in Scrapy

13:53пожаловаться #12

МС

хм, одного меня настораживает один единстенный статус 404 и ни одного 200 ?

13:53пожаловаться #13

а, у тебя ошибка, паук упал

13:53пожаловаться #14

Михаил Синегубов

хм, одного меня настораживает один единстенный статус 404 и ни одного 200 ?

это да)

13:54пожаловаться #15

сначала всегда смотри, есть ли в логах итемы которые тебе нужны, а потом уже добавляй экспорт, если они вообще есть, то они сохранятся в экспорте

13:55пожаловаться #16

помогает, ты неправильно написал, нужно -t json -o out.json

Михаил Синегубов in Scrapy

13:58пожаловаться #17

МС

ты подсказки читал? оно ругается на "перед объявлением класса нет двуз пустых строк", PEP8 жеж 😆

13:58пожаловаться #18

но это не твой случай, у тебя в пауке ошибка

13:58пожаловаться #19

попробуй на http поменять