В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Scrapy

380 membersпожаловаться на группу
2019 December 20

AR

Andrey Rahmatullin in Scrapy
нет, имеющиеся итемлоадеры куда лучше сования буковок в дикты хотя бы благодаря процессорам
источник
22:45пожаловаться#1

М

Мак in Scrapy
Тут без подвоха, а как от более сведущих камрадов
источник
22:45пожаловаться#2

AR

Andrey Rahmatullin in Scrapy
а полезнее - https://github.com/scrapy/scrapy/pull/3881 https://github.com/BurnzZ/scrapy-loader-upkeep  https://github.com/scrapy/scrapy/issues/4005
GitHub
Support for dataclasses.dataclass objects as items by elacuesta · Pull Request #3881 · scrapy/scrapy
Fixes #3761
It seems to me like there would be a limitation in the way we could use dataclassess with ItemLoaders. Given the fact that all fields are supposed to be provided (except for those with ...
источник
22:45пожаловаться#3

AR

Andrey Rahmatullin in Scrapy
Item Loaders provide a convenient mechanism for populating scraped Items. Even though Items can be populated using their own dictionary-like API, Item Loaders provide a much more convenient API for populating them from a scraping process, by automating some common tasks like parsing the raw extracted data before assigning it.
источник
22:46пожаловаться#4

М

Мак in Scrapy
Andrey Rahmatullin
нет, имеющиеся итемлоадеры куда лучше сования буковок в дикты хотя бы благодаря процессорам
А нет ли здесь экономии на спичках, так сказать...
источник
22:46пожаловаться#5

AR

Andrey Rahmatullin in Scrapy
нет
источник
22:47пожаловаться#6

М

Мак in Scrapy
Наглядность в угоде паре процентов мощности
источник
22:47пожаловаться#7

AR

Andrey Rahmatullin in Scrapy
какой ещё мощности
источник
22:47пожаловаться#8

AR

Andrey Rahmatullin in Scrapy
процессоры
источник
22:47пожаловаться#9

AR

Andrey Rahmatullin in Scrapy
https://docs.scrapy.org/en/latest/topics/loaders.html#input-and-output-processors вот эти
источник
22:47пожаловаться#10

М

Мак in Scrapy
Я б понял если б мы микропроцессоры прогали, где памяти пара десятков кб
источник
22:48пожаловаться#11

AR

Andrey Rahmatullin in Scrapy
😩
источник
22:48пожаловаться#12

М

Мак in Scrapy
Andrey Rahmatullin
😩
Ну прости уж неучей
источник
22:48пожаловаться#13

AR

Andrey Rahmatullin in Scrapy
не, ну если охота руками одни и те же функции вызывать на каждое поле - вперёд, но я не вижу в этом преимущества
источник
22:49пожаловаться#14

М

Мак in Scrapy
Наглядность... Zen python
источник
22:49пожаловаться#15

AR

Andrey Rahmatullin in Scrapy
🤷‍♂️
источник
22:49пожаловаться#16

М

Мак in Scrapy
А реальна ли разница в производительности?
источник
22:50пожаловаться#17

AR

Andrey Rahmatullin in Scrapy
какая ещё разница в производительности?
источник
22:51пожаловаться#18

М

Мак in Scrapy
Andrey Rahmatullin
🤷‍♂️
Я со всем уважением, не пойми привратно
источник
22:51пожаловаться#19

AR

Andrey Rahmatullin in Scrapy
ну просто я много пауков написал и представляю, что писать быстро, что медленно и в каком проценте случаев без лоадера быстрее
источник
22:51пожаловаться#20