А
возможно я тоже путаю, докой подтвердить не могу
Size: a a a
2020 September 04
AZ
кмк лучше разделять эти процессы, чтобы у оператора было понимание когда идет DML операция, а когда обсчет статистики
А
это вносит непрозрачность, но дает в среднем больше плюсов
AZ
хуже что сбор статистики тоже память жрет и может усугубить ситуацию. но в принципе ясно, волшебных кнопочек нет
у них вроде есть теперь сэмплинг статистики, мб попробовать его включить сначала https://docs.cloudera.com/documentation/enterprise/latest/topics/impala_perf_stats.html#experimental_stats_features
MB
Ребята, привет! Кто может посоветовать 🔥опытного специалиста по администрированию Hadoop,находящегося в поиске работы в Мск?
VS
админы хадупа не ищут работу, это работа их ищет - давно известный факт
AZ
находящиеся в поиске работы не связанной с Hadoop
ПБ
Maria B
Ребята, привет! Кто может посоветовать 🔥опытного специалиста по администрированию Hadoop,находящегося в поиске работы в Мск?
Вакансии можно сюда постить @datajobschannel
С
Админ хадупа должен крутиться как минимум на 3х работах одновременно
S
зачем?
OA
зачем?
Потому что хули там администрировать.
N
Простите, уже 4 минуты валяюсь под столом
AS
Oleksandr Averchenko
Потому что хули там администрировать.
+1 если чистый hadoop, но как правило ищут на всю бигдату, а там есть чем заняться, одна возня с сертификатами чего стоит
PF
+1 если чистый hadoop, но как правило ищут на всю бигдату, а там есть чем заняться, одна возня с сертификатами чего стоит
Да ладно
Хадуп же как ремонт, там всегда есть чем заняться и что улучшить
НА везде повключать, керберос, всяких либ математикам насобирать, новых апач покемонов в кластер затащить, подсказать пользователям что у них не работает
За это время ещё и кластер начинает расти и нагрузка
Хадуп же как ремонт, там всегда есть чем заняться и что улучшить
НА везде повключать, керберос, всяких либ математикам насобирать, новых апач покемонов в кластер затащить, подсказать пользователям что у них не работает
За это время ещё и кластер начинает расти и нагрузка
PF
Жабу обновить
EL
Жабу обновить
Аналитиков учить дистинкты в Хайфе не писать...
AZ
Да ладно
Хадуп же как ремонт, там всегда есть чем заняться и что улучшить
НА везде повключать, керберос, всяких либ математикам насобирать, новых апач покемонов в кластер затащить, подсказать пользователям что у них не работает
За это время ещё и кластер начинает расти и нагрузка
Хадуп же как ремонт, там всегда есть чем заняться и что улучшить
НА везде повключать, керберос, всяких либ математикам насобирать, новых апач покемонов в кластер затащить, подсказать пользователям что у них не работает
За это время ещё и кластер начинает расти и нагрузка
всякие HA и krb наверное все-таки до того как пользователей пустят, разовая работа, там дальше надо следить за здоровьем, рулить ресурсами, приглядывать чтобы файлов мелких не плодили, учить пользоваться спарком поверх ярна - по сути технологическая нянька, от такой работы легко выгореть