Size: a a a

2020 September 30

ibkkth Марат in Scrapy
источник

ibkkth Марат in Scrapy
источник

OS

Oleg Shleiko in Scrapy
да хватит сюда скрины бросать
источник

ibkkth Марат in Scrapy
))
источник

S

Spirit💎 in Scrapy
Oleg Shleiko
да хватит сюда скрины бросать
фотографии*
источник

S

Spirit💎 in Scrapy
пупон смог запустить, скриншот не смог
источник

ibkkth Марат in Scrapy
Опишу задачу. Есть сайт egrul. Там в окошечко вбивается инн, жмется кнопка и выгружается pdf файл. Это надо автоматизировать, но файлы по прежнему должны быть pdf. Сидеть выкорябывать что то из requests.get(url).content - не годится. У меня опыта тут 0. Чем лучше пользоваться, если надо поскорей что то написать. Scripy, requests или вот есть selenium.
источник

МС

Михаил Синегубов... in Scrapy
ibkkth Марат
Опишу задачу. Есть сайт egrul. Там в окошечко вбивается инн, жмется кнопка и выгружается pdf файл. Это надо автоматизировать, но файлы по прежнему должны быть pdf. Сидеть выкорябывать что то из requests.get(url).content - не годится. У меня опыта тут 0. Чем лучше пользоваться, если надо поскорей что то написать. Scripy, requests или вот есть selenium.
ок, скажу по проще. egrul ты быстро не распарсишь, то что ты нашел статью на хабре - еще ничего не значит.
То что работает на одной ссылке - не факт, что будет работать на куче ссылок.
источник

ibkkth Марат in Scrapy
Вопрос цены
источник

A

Andrii in Scrapy
вопрос в тему фрилансеров.  никто не знает группы где можно заказать дизайн?
источник

ТЛ

Танги Ле Пенс... in Scrapy
Всем здравствуйте! Недавно начал работать со scrapy, мне пришлось создать свой собственный download middleware, который запрашивает хром через cdp протокол. Он возвращает HTMLResponse объект в process_request (значит, процессинг оставливается на этом этапе). Middleware хорошо работает, но когда использую его в CrawlSpider c rules, повторные вызовы больше не выполняются 🤔 Без этого middleware выполняются. Наверное что-то неправильно понял, помощь нужна)
источник

К

Кирилл in Scrapy
Танги Ле Пенс
Всем здравствуйте! Недавно начал работать со scrapy, мне пришлось создать свой собственный download middleware, который запрашивает хром через cdp протокол. Он возвращает HTMLResponse объект в process_request (значит, процессинг оставливается на этом этапе). Middleware хорошо работает, но когда использую его в CrawlSpider c rules, повторные вызовы больше не выполняются 🤔 Без этого middleware выполняются. Наверное что-то неправильно понял, помощь нужна)
Без кода сложно что-то посоветовать
источник

ТЛ

Танги Ле Пенс... in Scrapy
Кирилл
Без кода сложно что-то посоветовать
Вот главное: https://pastebin.com/PLcvWPeY
источник

AR

Andrey Rahmatullin in Scrapy
что такое повторные вызовы?
источник

ТЛ

Танги Ле Пенс... in Scrapy
Callback
источник

AR

Andrey Rahmatullin in Scrapy
что callback?
источник

ТЛ

Танги Ле Пенс... in Scrapy
В коде это parse_item
источник

AR

Andrey Rahmatullin in Scrapy
ты называешь колбэки повторными вызовами или что?
источник

ТЛ

Танги Ле Пенс... in Scrapy
Да 😬 Русский - не мой родной язык
источник

AR

Andrey Rahmatullin in Scrapy
окей, и что происходит?
источник