mais @) ыы
При парсинге сайта примерно на середине третей страницы скрипт ломается, а на самом сайте выскакивает "Оповещение о большом количестве запросов" (скриншот ниже). Пытался поправить обычным для меня способами: sleep (после каждого запроса на сервер) менял HEADERS (каждый раз при запросе на сервер использовался новый случайный HEADERS), но к моему сожалению это ник чему не привело. Есть предположения как исправить ?
ну скрипт покажи что и как делает. Вдруг у тебя ошибка в логике, заставляющая каждый раз долбится по ссылке