Size: a a a

2019 December 14

К

Кирилл in Scrapy
Видимо дефолтное 16
источник

АП

Агент Печенька in Scrapy
источник

К

Кирилл in Scrapy
izzz zzi
так же можно и запустить в 100+ локально и будет не 30 а меньше
Особо без разницы конкретные числа, важнее соотношение
источник

К

Кирилл in Scrapy
Можно долго не мерять, скрапи крепкий середнячок
источник

S

Stasykk in Scrapy
Доброго времени суток!
Кто сталкивался с проблемой при работе с Headless Chrome не могу сменить прокси, по отдельности все работает, а вместе выдает странную ошибку:
...  
selenium.common.exceptions.WebDriverException: Message: unknown error: failed to wait for extension background page to load: chrome-extension://dijhigdjkfkijamiaamcaiiphiakekff/_generated_background_page.html
from unknown error: page could not be found: chrome-extension://dijhigdjkfkijamiaamcaiiphiakekff/_generated_background_page.html
...

Вот мой код: https://pastebin.com/VqYPmK2R

СПАСИБО!
источник

К

Кирилл in Scrapy
Stasykk
Доброго времени суток!
Кто сталкивался с проблемой при работе с Headless Chrome не могу сменить прокси, по отдельности все работает, а вместе выдает странную ошибку:
...  
selenium.common.exceptions.WebDriverException: Message: unknown error: failed to wait for extension background page to load: chrome-extension://dijhigdjkfkijamiaamcaiiphiakekff/_generated_background_page.html
from unknown error: page could not be found: chrome-extension://dijhigdjkfkijamiaamcaiiphiakekff/_generated_background_page.html
...

Вот мой код: https://pastebin.com/VqYPmK2R

СПАСИБО!
Где ты взял этот код?
источник

S

Stasykk in Scrapy
Кирилл
Где ты взял этот код?
Я его слепила из того что было 🙈
источник

К

Кирилл in Scrapy
Судя по документации, в add_extension нужно добавлять файлы .crx
источник

К

Кирилл in Scrapy
Stasykk
Доброго времени суток!
Кто сталкивался с проблемой при работе с Headless Chrome не могу сменить прокси, по отдельности все работает, а вместе выдает странную ошибку:
...  
selenium.common.exceptions.WebDriverException: Message: unknown error: failed to wait for extension background page to load: chrome-extension://dijhigdjkfkijamiaamcaiiphiakekff/_generated_background_page.html
from unknown error: page could not be found: chrome-extension://dijhigdjkfkijamiaamcaiiphiakekff/_generated_background_page.html
...

Вот мой код: https://pastebin.com/VqYPmK2R

СПАСИБО!
источник

B

BOT FACTORY in Scrapy
Это если без авторизации...
источник

К

Кирилл in Scrapy
BOT FACTORY
Это если без авторизации...
А чего нет?
источник

S

Stasykk in Scrapy
У меня с авторизацией, но я такое уже пробовала, не работает почему то...оставляет мой апи
источник

К

Кирилл in Scrapy
А нашел похожую ошибку, пишут что в хэдлесе не работает расширение
источник

S

Stasykk in Scrapy
Кирилл
Судя по документации, в add_extension нужно добавлять файлы .crx
Вот тут нашла код для смены прокси:

https://qna.habr.com/q/397163
источник

S

Stasykk in Scrapy
Смена прокси работает, а вот запустить браузер без графики не могу с ним
источник

К

Кирилл in Scrapy
источник

S

Stasykk in Scrapy
Ничего не поняла 😒
источник

К

Кирилл in Scrapy
Это плохо(
источник

S

Stasykk in Scrapy
Кирилл
Это плохо(
Предлагаете установить Xvfb?
источник

К

Кирилл in Scrapy
Наверное. Я нашел еще статьи, но пусть лучше ответят те, кто реально с этим сталкивался
источник