Size: a a a

2020 August 04

CF

Cool 🦊 Fox in Scrapy
источник

А

Айван in Scrapy
Здрасьте
источник

A

Andrii in Scrapy
Привет. Такой вопрос: как сделать чтобы открывало только один браузер пока он не закончит свою работу?
источник

A

Andrii in Scrapy
mores = response.xpath("//span/a[text()='more ...']/@href").getall()
       for more in mores:
           yield scrapy.Request(url=self.base_url + more, callback=self.parse_more,
                                meta={'category_name': category_name})

   def parse_more(self, response):
       driver = webdriver.Chrome(chrome_options=CHROME_OPTIONS)
       driver.get(response.url)
источник

A

Andrii in Scrapy
толи один поток или как лучше ето сказать
источник

К

Кирилл in Scrapy
Один драйвер и будет один браузер, сохрани его в паука при открытии паука и используй гет
источник

A

Andrii in Scrapy
Кирилл
Один драйвер и будет один браузер, сохрани его в паука при открытии паука и используй гет
плодит по 2-3-4
источник

К

Кирилл in Scrapy
Ну ты его несколько раз создаешь, это же в калбэке
источник

К

Кирилл in Scrapy
Кирилл
Один драйвер и будет один браузер, сохрани его в паука при открытии паука и используй гет
Или возьми scrapy-selenium там как раз только один "поток"
источник

A

Andrii in Scrapy
Щас гляну, спасибо
источник

A

Andrii in Scrapy
Еще тупой вопрос
источник

A

Andrii in Scrapy
driver.implicitly_wait(5)
источник

A

Andrii in Scrapy
вообще не ждет, в чем проблема?
источник

A

Andrii in Scrapy
заменяю на тайм.слип, но ето уж очень не хорошо
источник

К

Кирилл in Scrapy
Это внутренняя настройка, задает паузы которые происходят при каких-то там условиях. Когда ты ее задаешь, это установка, а не сама пауза
источник

К

Кирилл in Scrapy
Типа таймаута при поиске
источник

A

Andrii in Scrapy
Не експлисити разве?
источник

A

Andrii in Scrapy
Implicit Waits¶

An implicit wait tells WebDriver to poll the DOM for a certain amount of time when trying to find any element (or elements) not immediately available. The default setting is 0. Once set, the implicit wait is set for the life of the WebDriver object
источник

К

Кирилл in Scrapy
Andrii
Implicit Waits¶

An implicit wait tells WebDriver to poll the DOM for a certain amount of time when trying to find any element (or elements) not immediately available. The default setting is 0. Once set, the implicit wait is set for the life of the WebDriver object
Ну,  задает неявное ожидание  во время опроса дома, при поиске, если элемент не находится сразу
источник

A

Andrii in Scrapy
Блин, мне нужно что-то похоже на стапе (или покури)-5секунд
источник