М
Size: a a a
2020 February 03
МС
я двумя пользуюсь, рукапча и антикапча. рукапча на мой взгляд поудобнее в плане того, что не берет деньги если не смогли решить за несколько подходов
насчет сохранения куков не прояснишь? не приходится решать на каждой странице ее?
поянтоно что у меня, скорее всего, чуть по другому будет, но "какая средняя температура по больнице"?
поянтоно что у меня, скорее всего, чуть по другому будет, но "какая средняя температура по больнице"?
М
насчет сохранения куков не прояснишь? не приходится решать на каждой странице ее?
поянтоно что у меня, скорее всего, чуть по другому будет, но "какая средняя температура по больнице"?
поянтоно что у меня, скорее всего, чуть по другому будет, но "какая средняя температура по больнице"?
вот тут не подскажу даже... от прокси много зависит, понравится или нет сайту. бывает и так, что на каждый запрос втыкают капчу. а насчет пуппитира - я вопрос задавал в свое время - мне тут парни ответили что процентов 70 помогает капчу в3 проходить. но сам я не пробовал
МС
вот тут не подскажу даже... от прокси много зависит, понравится или нет сайту. бывает и так, что на каждый запрос втыкают капчу. а насчет пуппитира - я вопрос задавал в свое время - мне тут парни ответили что процентов 70 помогает капчу в3 проходить. но сам я не пробовал
угу, спс и на этом, это уже намного больше чем я знал до этого 😄
М
угу, спс и на этом, это уже намного больше чем я знал до этого 😄
для сервиса там придется параметр один поискать action - это значение нужно искать в javascript коде сайта в вызове функции grecaptcha.execute. я полдня убил в свое время, чтоб понять что и куда и где его ловить
МС
для сервиса там придется параметр один поискать action - это значение нужно искать в javascript коде сайта в вызове функции grecaptcha.execute. я полдня убил в свое время, чтоб понять что и куда и где его ловить
ок, спс
E
народ, ко мне тут recaptha v3 пришла. Чем ее проходят тру программисты? 😄 Что то такое почитал про "puppeteer", нашел мидлварю https://github.com/clemfromspace/scrapy-puppeteer
в правильном направлении копаю? Или надо куда в другую сторону рыть?
в правильном направлении копаю? Или надо куда в другую сторону рыть?
Вероятно придется все рендерить через puppeteer плюс плагин stealth
l
с дром.ру кто нибудь работал в последнее время?
SG
Всем, привет! Есть кто работал со стеком scrapy docker kubernetes, напишите, пожалуйста!
R
Всем, привет! Есть кто работал со стеком scrapy docker kubernetes, напишите, пожалуйста!
А вопрос то какой?
SG
Надо настроить систему, примерно, как на scrapinghub, т.е. арендуешь сервер и можешь деплоить туда проекты на scrapy, только сделать это на herzner, чтобы почасово за аренду платить
SG
Наверно настроить и разработать, я не силен в данной теме, но суть примерно такая, есть разные проекты на scrapy, в зависимости от потребности они могут быть запущены на ВМ herzner в необходимом объеме. Т.е. нужен настроенный контейнер (docker) и отслеживание нагрузки (kubernetes), появилась задача поднялась ВМ, задача выполнилась, убралась ВМ.
AR
да, дофига делов
