Size: a a a

2020 January 17

AR

Andrey Rahmatullin in Scrapy
так
источник

AR

Andrey Rahmatullin in Scrapy
блин
источник

AR

Andrey Rahmatullin in Scrapy
я устал рассказывать это на реддите, но тут хоть на русском будет
источник

AR

Andrey Rahmatullin in Scrapy
если надо чтобы запрос б шёл строго после запроса а, он должен быть зашедулен из коллбэка запроса а
источник

AR

Andrey Rahmatullin in Scrapy
точка
источник

AR

Andrey Rahmatullin in Scrapy
всё остальное это ересь, асинхронка так не работает
источник

МС

Михаил Синегубов in Scrapy
хм, а может вопрос еще и в куках / реферере?
было у меня что то похожее.
Ибо я не представляю сайт, которй отслеживает по IP порядок запросов
источник

AR

Andrey Rahmatullin in Scrapy
это тоже хороший подход
источник

AR

Andrey Rahmatullin in Scrapy
с другой стороны так сказать
источник

МС

Михаил Синегубов in Scrapy
ща, Булат нам простынку запростит, почитаем, что-то долго сочиняет 😂
источник

B

Bulatbulat48 in Scrapy
Andrey Rahmatullin
если надо чтобы запрос б шёл строго после запроса а, он должен быть зашедулен из коллбэка запроса а
я тоже так порекомендовал и потестил, но мне сказали что оно не работает на большом количестве реквестов. Ещё сам сегодня потестирую спасибо
источник

AR

Andrey Rahmatullin in Scrapy
что блин значит не работает
источник

AR

Andrey Rahmatullin in Scrapy
ну т.е. тут нетривиальная задача, как протаскивать всю очередь в нужные коллбэки
источник

AR

Andrey Rahmatullin in Scrapy
но это давняя CS задача про замену итерации рекурсией
источник

AR

Andrey Rahmatullin in Scrapy
решается объектом очередь
источник

B

Bulatbulat48 in Scrapy
Михаил Синегубов
хм, а может вопрос еще и в куках / реферере?
было у меня что то похожее.
Ибо я не представляю сайт, которй отслеживает по IP порядок запросов
Дада, там Асп нет, надо поразбираться
источник

AR

Andrey Rahmatullin in Scrapy
ахаха
источник

AR

Andrey Rahmatullin in Scrapy
и запросы ещё поди пост, а не гет?
источник

AR

Andrey Rahmatullin in Scrapy
если да то ответ на вопрос Михаила известен
источник

МС

Михаил Синегубов in Scrapy
Bulatbulat48
Дада, там Асп нет, надо поразбираться
БЕГИ ГЛУПЕЦ!!!
источник