VR
Спасибр
site:, вот, кто-может или как можно стянуть все урл отого site: ? Мне показует только 30 стр., можно достать больше?Size: a a a
2020 October 07
A
Нужна помощь-совет: есть в гугла такая штука как
A
он даже в кеше есть, 200к страниц спарсил
A
а вот еще url как набрать, хз
A
вот думал через гугл, у него все урл есть, а как достать - хз
МС
Andrii
вот думал через гугл, у него все урл есть, а как достать - хз
хм, а если через сайтмап вытащить старницы сайта и по ним попробовать кеш достать?
это все теория, я то и кэш гугла не ковырял :)
кстати, если так дохрена страниц - может в вебархиве глянуть?
это все теория, я то и кэш гугла не ковырял :)
кстати, если так дохрена страниц - может в вебархиве глянуть?
A
хм, а если через сайтмап вытащить старницы сайта и по ним попробовать кеш достать?
это все теория, я то и кэш гугла не ковырял :)
кстати, если так дохрена страниц - может в вебархиве глянуть?
это все теория, я то и кэш гугла не ковырял :)
кстати, если так дохрена страниц - может в вебархиве глянуть?
нет сайтмапа, урл подружает через апи, которая дает не больше 40 страниц пагинации. Короч есть 100 разделов, где максимум можно стануть 80.000 урлов без гемороя. Но на сайте минимум 1.4млн страниц.
A
хм, а если через сайтмап вытащить старницы сайта и по ним попробовать кеш достать?
это все теория, я то и кэш гугла не ковырял :)
кстати, если так дохрена страниц - может в вебархиве глянуть?
это все теория, я то и кэш гугла не ковырял :)
кстати, если так дохрена страниц - может в вебархиве глянуть?
ну так тяну,а вот новЬІе урл стянуть очень сложно
МС
дай сайт в личку, вдруг что на ум придет...
A
Ф
Andrii
Нужна помощь-совет: есть в гугла такая штука как
site:, вот, кто-может или как можно стянуть все урл отого site: ? Мне показует только 30 стр., можно достать больше?(Точно не могу знать никогда не пробовал )но может в настройках аккаунта попробуйте проставить настройки в отображении минимум 100 сайтов в гугле
MМ
Где можно хранить счетчик айди?