В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Scrapy

621 membersпожаловаться на группу
2020 September 01

i

i in Scrapy
а вот 4 вкладки, причем поначалу там 286 мегов было:
https://i.imgur.com/k2hHmOe.png
источник
11:24пожаловаться#1

f

fishsouprecipe 🤍 in Scrapy
Если запускать в тредах а не процессах то все ок
источник
11:24пожаловаться#2

f

fishsouprecipe 🤍 in Scrapy
Это ио таск
источник
11:24пожаловаться#3

i

i in Scrapy
(правда это винда)
источник
11:25пожаловаться#4

i

i in Scrapy
а еще же этот есть, от создателей пуппетира
источник
11:26пожаловаться#5

i

i in Scrapy
playwright, он там весь обсыпан тоже async-await
источник
11:26пожаловаться#6

f

fishsouprecipe 🤍 in Scrapy
А он какой-то для зумеров
источник
11:26пожаловаться#7

i

i in Scrapy
вот копай в него
источник
11:26пожаловаться#8

i

i in Scrapy
не, ну создатель пуппетира фигни не напишет уж
источник
11:26пожаловаться#9

i

i in Scrapy
(наверн)
источник
11:27пожаловаться#10

S

SoHard 🎄 in Scrapy
i
не, ну создатель пуппетира фигни не напишет уж
Ну так то он активно допиливается вижу
источник
11:30пожаловаться#11

S

SoHard 🎄 in Scrapy
последний коммит 8ч назад
источник
11:30пожаловаться#12

i

i in Scrapy
SoHard 🎄
последний коммит 8ч назад
походу  им микрософт просто дал огромную котлету бабла и у них открылся стимул и второе дыхание и вообще энтузиазм забурлил. особенно судя по активности решаемых иссьюсов
источник
11:36пожаловаться#13

SS

Sergey Sergey in Scrapy
Подскажите, как правильно парсить Beru. Что скрейпи, что селениум уходят в 403 ошибку. Кто подскажет, куда копать? Прокси хорошие.
источник
15:37пожаловаться#14

B

Bulatbulat48 in Scrapy
Sergey Sergey
Подскажите, как правильно парсить Beru. Что скрейпи, что селениум уходят в 403 ошибку. Кто подскажет, куда копать? Прокси хорошие.
апишки нет у них?
источник
15:43пожаловаться#15

SS

Sergey Sergey in Scrapy
Bulatbulat48
апишки нет у них?
партнерская, для загрузки товаров и т д
источник
15:43пожаловаться#16

B

Bulatbulat48 in Scrapy
Sergey Sergey
партнерская, для загрузки товаров и т д
а на сайте, нигде в json не отдаются данные?
источник
15:44пожаловаться#17

B

Bulatbulat48 in Scrapy
посмотрите страницы пагинации например
источник
15:44пожаловаться#18

B

Bulatbulat48 in Scrapy
возможно такие запросы не будут блокироваться через антибан системы
источник
15:45пожаловаться#19

SS

Sergey Sergey in Scrapy
Bulatbulat48
а на сайте, нигде в json не отдаются данные?
нужные данные отдаются, но вопрос в том, что сервер не отдает страницу совсем. 403 ошибку выдает. Распарсить страницу нет проблем. есть проблема в ее получении
источник
15:45пожаловаться#20