В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

3187 membersпожаловаться на группу
2021 October 26

UD

Uncel Duk in Data Engineers
И получаешь взлом жопы, нужно еще больше, чтобы чинить баги самих продуктов
источник
23:37пожаловаться#1

ЕГ

Евгений Глотов... in Data Engineers
Не вижу проблемы для бизнеса
источник
23:38пожаловаться#2

AZ

Anton Zadorozhniy in Data Engineers
sunk cost fallacy
источник
23:38пожаловаться#3

AZ

Anton Zadorozhniy in Data Engineers
так а спарк тут причем?
источник
23:38пожаловаться#4

ЕГ

Евгений Глотов... in Data Engineers
Спарк эскуэль
источник
23:38пожаловаться#5

AZ

Anton Zadorozhniy in Data Engineers
ну в нем проблема же
источник
23:39пожаловаться#6

ЕГ

Евгений Глотов... in Data Engineers
В чём конкретно
источник
23:39пожаловаться#7

AZ

Anton Zadorozhniy in Data Engineers
тормозит, низкая утилизация, хрупкий в плане тулинга, обновления требуют ресурсов
источник
23:39пожаловаться#8

UD

Uncel Duk in Data Engineers
Угу
источник
23:39пожаловаться#9

UD

Uncel Duk in Data Engineers
Внезапно оказывается что опенсурс это не бесплатно совсем
источник
23:40пожаловаться#10

AZ

Anton Zadorozhniy in Data Engineers
никогда не был
источник
23:40пожаловаться#11

UD

Uncel Duk in Data Engineers
А тэо считали левой пяткой
источник
23:40пожаловаться#12

ЕГ

Евгений Глотов... in Data Engineers
А что значит низкая утилизация?
источник
23:41пожаловаться#13

AZ

Anton Zadorozhniy in Data Engineers
ну и получается что можно конечно на S3 файлики спарком считать, но если сами приложения делают реплику сырых данных прямо в сноуфлейке - зачем все эти кластера, управление памятью и экзекьюторами
источник
23:41пожаловаться#14

GP

Grigory Pomadchin in Data Engineers
а как он тормозит? там теже экспрешоны просто через стринги
источник
23:41пожаловаться#15

GP

Grigory Pomadchin in Data Engineers
т.е. он такойж как обычные датафреймы
источник
23:41пожаловаться#16

GP

Grigory Pomadchin in Data Engineers
т.е. не то что такойж суть вся в этом
источник
23:42пожаловаться#17

ЕГ

Евгений Глотов... in Data Engineers
Наверно про то, что спарк вместе с датафреймами тормозит относительно чего-то ещё)
источник
23:42пожаловаться#18

GP

Grigory Pomadchin in Data Engineers
а, ну тогда да
источник
23:42пожаловаться#19

AZ

Anton Zadorozhniy in Data Engineers
не умеет как следует нагрузить железо, оверхеды всякие (YARN, JVM memory management)
источник
23:42пожаловаться#20