В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

1724 membersпожаловаться на группу
2019 November 05

EV

Eduard Vlasov in Data Engineers
Anton Zadorozhniy
ну вы же не держите эти кластера все время, можно запустить кластер, толкнуть последовательно джобы, тем более у вас наверняка maximizeResourceAllocation включен и параллельно запускать джобы смысла нет, и на последнем дропнуть кластер, и не нужно ничего снаружи оркестировать
не, у меня конкретно долгоживущий
источник
16:29пожаловаться#1

EV

Eduard Vlasov in Data Engineers
там presto + yarn пополам делят ресурс
источник
16:29пожаловаться#2

AZ

Anton Zadorozhniy in Data Engineers
а если секрет, почему не два?
источник
16:29пожаловаться#3

AZ

Anton Zadorozhniy in Data Engineers
и ярновый по запросу поднимать
источник
16:30пожаловаться#4

AZ

Anton Zadorozhniy in Data Engineers
вам нужен локальный быстрый сторадж?
источник
16:30пожаловаться#5

EV

Eduard Vlasov in Data Engineers
пока не дошли руки померять насколько это выгоднее
источник
16:30пожаловаться#6

EV

Eduard Vlasov in Data Engineers
сейчас на ярне я иногда развлекаюсь из зепелина
источник
16:31пожаловаться#7

AZ

Anton Zadorozhniy in Data Engineers
ясно, спасибо
источник
16:31пожаловаться#8

EV

Eduard Vlasov in Data Engineers
ну и еще пока тяжело осмыслить тот факт что для выполнения незапланированной джобы надо ждать поднятия кластера
источник
16:33пожаловаться#9

AZ

Anton Zadorozhniy in Data Engineers
я со своими клиентами мыслю сессиями для такого
источник
16:34пожаловаться#10

EV

Eduard Vlasov in Data Engineers
а так просто взяли ноды на 10% дороже, где памяти в 2 раза больше и поделили
источник
16:34пожаловаться#11

AZ

Anton Zadorozhniy in Data Engineers
сатанист начал сессию - поднял себе кластер, исполняет там джобы
источник
16:34пожаловаться#12

EV

Eduard Vlasov in Data Engineers
одно другому как правило не мешает
источник
16:35пожаловаться#13

AZ

Anton Zadorozhniy in Data Engineers
сессию закончил, кластер убили
источник
16:35пожаловаться#14

EV

Eduard Vlasov in Data Engineers
у меня сатанисты в основном в престо развлекаются
источник
16:35пожаловаться#15

AZ

Anton Zadorozhniy in Data Engineers
даже если оно резервд капасити, ее можно убить и кто-то будет для другого использовать
источник
16:35пожаловаться#16

AZ

Anton Zadorozhniy in Data Engineers
да, престо на ЕМР это часто недооцененный компонент, я тоже его везде использую
источник
16:36пожаловаться#17

AZ

Anton Zadorozhniy in Data Engineers
старберст еще лучше, но не каждый клиент хочет возится
источник
16:36пожаловаться#18

EV

Eduard Vlasov in Data Engineers
сильно дороже?
источник
16:36пожаловаться#19

AZ

Anton Zadorozhniy in Data Engineers
сильно :( https://aws.amazon.com/marketplace/pp/B07DKV5659
Amazon
AWS Marketplace: Presto, by Starburst
источник
16:38пожаловаться#20