Size: a a a

2019 December 23

МС

Михаил Синегубов in Scrapy
Мак
народ, кто ВК недавно делал? там какие засады присутствуют? если без авторизации, чисто по ИД аккаунтов пройтись
делай автоирзацию + API
источник

МС

Михаил Синегубов in Scrapy
https://vk.com/dev/users.get

за раз 1000 ID

ограничение до 3 запросово на юзверя. Покупаешб пару десятков акков и хреначишь в многопотоке
источник

МС

Михаил Синегубов in Scrapy
по карайне мере раньше было та
источник

МС

Михаил Синегубов in Scrapy
UPD: ограничение, 3 запроса в секунду на пользователя
источник

М

Мак in Scrapy
наверное это можно для тех применить, кто не виден без авторизации
источник

AR

Andrey Rahmatullin in Scrapy
сейчас наверно таких дофига
источник

МС

Михаил Синегубов in Scrapy
Мак
наверное это можно для тех применить, кто не виден без авторизации
ну, если тебе не важно увеличение скорости почти в ~500 (при запросе доп полей) раз и безгеморойные структуированные данные, тогда да, тогда можно применять для профилей "только для авторизованых"
источник

М

Мак in Scrapy
да, там json на выходе конечно заманчиво звучит
источник

МС

Михаил Синегубов in Scrapy
вообще, парсить ВК через хтмл (ну, кроме аудио и, может, еще пары вещей) это еще тот ректальный метод, а если сплеш туда воткнуть.....
источник

AR

Andrey Rahmatullin in Scrapy
парсил поиск, норм
источник

AR

Andrey Rahmatullin in Scrapy
правда вроде выдача кончается через несколько страниц, но это я уже не помню
источник

МС

Михаил Синегубов in Scrapy
и кстати, авторизацию можно не писать, можно просто токены собрать и зохранить их
источник

AR

Andrey Rahmatullin in Scrapy
удивило что нет никаких антиботов
источник

М

Мак in Scrapy
сплеш там ни к чему, он вроде и через запросы все отдает
источник

МС

Михаил Синегубов in Scrapy
Andrey Rahmatullin
правда вроде выдача кончается через несколько страниц, но это я уже не помню
1000 айтемов максимум
источник

AR

Andrey Rahmatullin in Scrapy
угу
источник

МС

Михаил Синегубов in Scrapy
Мак
сплеш там ни к чему, он вроде и через запросы все отдает
вообщет, про сплеш - это был стеб 😂
источник

М

Мак in Scrapy
Михаил Синегубов
вообщет, про сплеш - это был стеб 😂
а, тонкий юмор не разглядел...
источник

МС

Михаил Синегубов in Scrapy
Мак
а, тонкий юмор не разглядел...
ну, я видел десктопный виндовый парсер со встроенным экплорером.... страница секунд 5 рендерилась

и да, это был парсер контакта :)
источник

М

Мак in Scrapy
Михаил Синегубов
ну, я видел десктопный виндовый парсер со встроенным экплорером.... страница секунд 5 рендерилась

и да, это был парсер контакта :)
ну мало ли кто как развлекается)) я почеу спрашиваю - я в вк просто заходил то лет 10 назад, не то чтоб парсить его...
источник