GP
я бы лучше не смог сказать
Size: a a a
2020 August 18
O
за год что-то изменилось?)
O
почему год назад?
UD
в хпц шедулят машинами и довольно урчат
UD
ярн хоть как-то может в цгруппы
GP
ярн хоть как-то может в цгруппы
новый (3) * старый странно лимитит ресурсы
ПБ
Привет! через livy запускаю такой код, который через spark-shell работает без проблем
val df_07 = spark.sql("SELECT * from t")
df_07.groupBy("d").agg(count("*").as("cnt"))
в livy выдает ошибку org.apache.spark.sql.AnalysisException: Table or view not found: t;
как я понял, проблема связана или с доступом к hive или contex , кто сталкивался, куда копать?
val df_07 = spark.sql("SELECT * from t")
df_07.groupBy("d").agg(count("*").as("cnt"))
в livy выдает ошибку org.apache.spark.sql.AnalysisException: Table or view not found: t;
как я понял, проблема связана или с доступом к hive или contex , кто сталкивался, куда копать?
GP
меня больше всего смущало что эти ярно контейнеры не настоящая изоляция класспасов
GP
т.е. ты зависимости ставишь на хосты всегда; и квази контейнеры имеют доступ к ним
GP
за год что-то изменилось?)
Еали ты ждёшь что тебе кто-то скажет - вот типа кубер / ярн - сильвер будет то ошибаешься. Что у кубера что у ярна разного рода проблемы; ну и типа если ты работаешь в сторону унификации экосистемы - иметь ярн кластер рядом с твоим кубер кластером может быть банально не удобно; я не так много случаев видел что бы ярн типа как кубер
ZM
в хпц шедулят машинами и довольно урчат
Для хпц такое количество менеджеров, что большинству и не снилось. В группы умеет много кто.
ZM
почему год назад?
После я совсем перестал смотреть на бигдато стеки и страдания. Не в курсе.
Ж
надо делать
и тебе
with Matchersи тебе
should be / should have все что угодно позволят заассертитьПопробую👍
АК
Сорри за флуд, баян конечно, но меня только что дико повеселил переведенный на русский состав моего клаудеровского кластера
A
А оттенок это что?
DZ
hue
A
Точно
EZ
а пряжа?
A
Yarn
A
Parcel посылка