AR
re.findall(r"\d{10}", response.xpath("//script[contains(text(), 'security')]/text()").get())[0]
это вытащит что попало
Size: a a a
2020 October 01
AR
А как правильно решить проблему описанную в https://stackoverflow.com/questions/13910357/how-can-i-use-multiple-requests-and-pass-items-in-between-them-in-scrapy-python/25571270#25571270 ?
inline_requests
iМ
Вот простенький код который работает пока его не засунешь в цикл. Там он скачивает только в последнем цикле
iМ
iМ
Это на сайте както ввлааливают применение циклов, или ошибка на моей стороне. Задеожки ставил большие. Если их убрать то
iМ
То или кнопку скачивания не находит или гоаорит что она пересекается с другой кнопкой
iМ
В общем вопрос- что такого в пайтоновском цикле что selenium там начинает ложать
iМ
Может там какая то многозадачность и не ввполнив одну часть он начинает считать другую
iМ
Ну а как это обьянить что так работает, а в цикле нет
iМ
Я думаю тут другое. С той стороны искусственный интеллект, ну или простой код который вычисляет нечеловеческие запросы. А код как код, там иговнокодить негде, я скинуть его могу
СТ
Я думаю тут другое. С той стороны искусственный интеллект, ну или простой код который вычисляет нечеловеческие запросы. А код как код, там иговнокодить негде, я скинуть его могу
Пройдись на дебаге, посмотри что там происходит. Если включать режим ванги то скорее всего ты там переменную перетираешь и у тебя сохраняется в итоге только последний результат
iМ
Пройдись на дебаге, посмотри что там происходит. Если включать режим ванги то скорее всего ты там переменную перетираешь и у тебя сохраняется в итоге только последний результат
Сейчас поставил key. Back_space и ошибка исчезла, скачивать начало все. Скажете переменную перетираю. А я все больше утвержлаюсь что там отслеживают нечеловеческие запросы. Медленно делать запросы по человечески.
iМ
iМ
Аот код который я сую в цикл
МС
Аот код который я сую в цикл
блин, да научись ты уже пастебином пользовтаься
iМ
И если убираю time. sleep то возникает ошибка unable to locate element
iМ
Ну да, так и делаю. Но можео как то точно определить когда DOM станет коректным, чтобы все появившиеся кнопки загрузки были на своих местах?. Element_to_be_clickabel?
МС
Ну да, так и делаю. Но можео как то точно определить когда DOM станет коректным, чтобы все появившиеся кнопки загрузки были на своих местах?. Element_to_be_clickabel?
искать циклом с паузой какой то элемент
SS
http://www.reggiani.net/yori-evo-ghostrack-system/family/yori-evo-ghostrack
я смотрю на XHR запросы которые отправляются при пагинации через scroll down и при открытии деталей конкретного продукта. Откуда берется значение параметра "_"?
я смотрю на XHR запросы которые отправляются при пагинации через scroll down и при открытии деталей конкретного продукта. Откуда берется значение параметра "_"?
AR
привыкай различать таймстемпы