Size: a a a

2019 December 23

МС

Михаил Синегубов in Scrapy
Мак
ну мало ли кто как развлекается)) я почеу спрашиваю - я в вк просто заходил то лет 10 назад, не то чтоб парсить его...
попробуй на API сделать, там палка/веревка....
если тебе, конечно, надо более 1000 ID чекать :)
источник

МС

Михаил Синегубов in Scrapy
источник

М

Мак in Scrapy
Михаил Синегубов
попробуй на API сделать, там палка/веревка....
если тебе, конечно, надо более 1000 ID чекать :)
да, несколько тысяч... токены при авторизации что ли отдаются
источник

МС

Михаил Синегубов in Scrapy
одного токена за глаза
источник

М

Мак in Scrapy
про 1000 запросов увидел в доке, а про 3 сек что то небыло
источник

МС

Михаил Синегубов in Scrapy
3 в секунду, это нао рыть ограничения
источник

М

Мак in Scrapy
Михаил Синегубов
3 в секунду, это нао рыть ограничения
там же вроде в 1 запросе можно всю инфу получить...
источник

МС

Михаил Синегубов in Scrapy
Мак
там же вроде в 1 запросе можно всю инфу получить...
дааааа :)
источник

МС

Михаил Синегубов in Scrapy
не написано щас ограничение, но я точно помню, что 350 мск ставил паузу
источник

МС

Михаил Синегубов in Scrapy
иначе ошибка 29 - Rate limit
источник

iz

izzz zzi in Scrapy
после пару млн запросов начинается
ConnectionRefusedError: Connection was refused by other side: 111: Connection refused.

прокси на ротации
источник

iz

izzz zzi in Scrapy
больше проксей нужно?
источник

М

Мак in Scrapy
izzz zzi
больше проксей нужно?
прокси общественные что ли?
источник

iz

izzz zzi in Scrapy
нет приват в4
источник

iz

izzz zzi in Scrapy
после 2-3м запросов начинается
источник

М

Мак in Scrapy
Михаил Синегубов
одного токена за глаза
видимо да... ид приложения от балды сочинял что ли?)) и токены вручную собирал, без авторега?
источник

М

Мак in Scrapy
izzz zzi
после 2-3м запросов начинается
сервер загибается видимо
источник

iz

izzz zzi in Scrapy
Мак
видимо да... ид приложения от балды сочинял что ли?)) и токены вручную собирал, без авторега?
проще ид от оф прилажек взять
источник

iz

izzz zzi in Scrapy
например от ведра
источник

iz

izzz zzi in Scrapy
или айфона
источник