В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Clojure — русскоговорящее сообщество

757 membersпожаловаться на группу
2021 August 05

ST

Sergey Trofimov in Clojure — русскоговорящее сообщество
а если там контент жаваскриптом генерится, через вебдрайвер сможет?
источник
11:05пожаловаться#1

MB

Mikhail Beliansky in Clojure — русскоговорящее сообщество
Да
источник
11:06пожаловаться#2

IG

Ivan Grishaev in Clojure — русскоговорящее сообщество
Да, хедлес-хромом прекрасно заходит
источник
11:06пожаловаться#3

IG

Ivan Grishaev in Clojure — русскоговорящее сообщество
Правда некоторые сайты определяют headles, и тогда приходится обычным хромом
источник
11:06пожаловаться#4

IG

Ivan Grishaev in Clojure — русскоговорящее сообщество
Даже если указать обычный заголовок
источник
11:06пожаловаться#5

MB

Mikhail Beliansky in Clojure — русскоговорящее сообщество
Там целую пачку всего нужно указать, кроме заголовка
источник
11:07пожаловаться#6

IG

Ivan Grishaev in Clojure — русскоговорящее сообщество
А что именно надо автоматизировать?
источник
11:07пожаловаться#7

MB

Mikhail Beliansky in Clojure — русскоговорящее сообщество
Чтобы пауки сами ходили по ссылкам
источник
11:07пожаловаться#8

IG

Ivan Grishaev in Clojure — русскоговорящее сообщество
Тогда не знаю. Я бы руками прописал и запускал в футурах
источник
11:09пожаловаться#9

MB

Mikhail Beliansky in Clojure — русскоговорящее сообщество
Вот тут раздел Full Set of Headers

https://www.zenrows.com/blog/stealth-web-scraping-in-python-avoid-blocking-like-a-ninja?utm_source=reddit&utm_medium=social&utm_campaign=avoid_blocking
Zenrows
Mastering Web Scraping in Python: Avoid Blocking Like a Ninja
Master the best techniques for massive scale scraping. Avoid detection and scrape the web silently - from browser fingerprinting to bypassing state-of-the-art solutions.
источник
11:09пожаловаться#10

IG

Ivan Grishaev in Clojure — русскоговорящее сообщество
Хедлес проверяется в т.ч. на уровне JS, там нет каких-то свойств window.Navigator или что-то вроде того
источник
11:10пожаловаться#11

IG

Ivan Grishaev in Clojure — русскоговорящее сообщество
подделать можно, но геморройно
источник
11:11пожаловаться#12

MB

Mikhail Beliansky in Clojure — русскоговорящее сообщество
В общем, если кто-то хорошо разбирается в скрейпинге и есть время на интересный проект — напишите в личку, пожалуйста)
источник
11:12пожаловаться#13

ap

andei papkov in Clojure — русскоговорящее сообщество
Cursive ещё потдержывается? а то не могу установить в IDEA
Plugin "Cursive" was not installed: Downloaded version is incompatible with the current IDE: Plugin 'Cursive' (version '1.10.2-2020.1') is not compatible with the current version of the IDE, because it requires build 201.* or older but the current build is IU-203.7717.56
источник
12:09пожаловаться#14

ST

Sergey Trofimov in Clojure — русскоговорящее сообщество
поддерживается
источник
12:09пожаловаться#15

ST

Sergey Trofimov in Clojure — русскоговорящее сообщество
1.11.0-eap1-2021.2
источник
12:10пожаловаться#16

ST

Sergey Trofimov in Clojure — русскоговорящее сообщество
на Build #IU-212.4746.92
источник
12:11пожаловаться#17

ap

andei papkov in Clojure — русскоговорящее сообщество
немного не понял, мне нужно idea обновить?, тк когда она была новой я так же не смог поставить
источник
12:13пожаловаться#18

ST

Sergey Trofimov in Clojure — русскоговорящее сообщество
я показал, какие версии у меня
что нужно сделать тебе, я не знаю
какая нужна версия курсива для твоей версии идеи — тоже не знаю 😊
удали курсив и поставь заново, вроде должна выбраться подходящая версия
источник
12:15пожаловаться#19

ap

andei papkov in Clojure — русскоговорящее сообщество
а, ok
источник
12:16пожаловаться#20