GP
к8с был экспериментальным в 2.4; сча уже достаточно широко используется
Size: a a a
2021 April 21
GP
Та все лучше чем ярн знаешь ли
PK
Я тоже не догоняю, а на дата локалити все уже болт забили? Или я чего-то не знаю?
GP
О каком дата локалити ты говоришь если у тебя скажем условный с3 и кубер кластер в том же регионе
S
та я вспоминаю как мы несколько килобаксов сожгли на том что промахнулись с регионами в ажуре
UD
Дата локалити решается портами в 400г
UD
Которые у амазуна есть
PK
Ну так я прро это вопрос и задаю. Дата локалити уже не модно? Т.е. вроде как мы еще год назад оптимизировали шаффлы, а теперь это не нужно?
A
просто возьми больше железа
UD
( на опремайзе максимум будет 25-40г с хоста )
UD
D
это деньги
UD
Деньги есть, железа тупо нет
GP
Экстернал шафл сервис; ну если те так шафл нужен)
PK
Так мне он не нужен, но спарк-то по другому не умеет.
UR
А можно для совсем диких6 а за что тут платят? Стендалонный кластер был всегда
https://spark.apache.org/docs/1.6.0/cluster-overview.html
https://spark.apache.org/docs/1.6.0/cluster-overview.html
UR
То что ноды в докер затащили это конечно зрада и пэрэмога, но кому деньги отдавать?
D
Read Operations** (every 4MB, per 10,000)
Write Operations* (every 4MB, per 10,000)
Write Operations* (every 4MB, per 10,000)