A
Livy сама собирает неактивные
На остальные висят скрипты с ttl и шлёт алерты админам
На остальные висят скрипты с ttl и шлёт алерты админам
Size: a a a
2019 December 19
K
Может кто-нибудь посоветовать тулы какие-то чтобы собрать метрики по памяти в спарке? чтобы понять насколько реально нужно памяти дать экзекутору и тд
Встроены в чем спарк , настройте синк
K
Там прям из коробки
M
Встроены в чем спарк , настройте синк
Того что есть в spark UI не хватает
K
Того что есть в spark UI не хватает
Графана
K
И статс де
M
Графана
Посмотрю, спс
AS
Встроены в чем спарк , настройте синк
Киньте, плиз, ссылкой или правильным запросом в гугл
K
AS
Спасибо
🔐
Драсти, такой вопрос, хочу в докере на виртуалке задеплоить хадуп в учебных целях, хватит ли мне 1RAM + 4 swapfile гигов памяти?
A
Драсти, такой вопрос, хочу в докере на виртуалке задеплоить хадуп в учебных целях, хватит ли мне 1RAM + 4 swapfile гигов памяти?
Мне в виртуалке и 4-х не хватало. Hortonworks не ставился
C
Indah Arista lee has been banned! Reason: CAS ban.
🔐
Мне в виртуалке и 4-х не хватало. Hortonworks не ставился
свапфайл не решает?
A
свапфайл не решает?
Честно говоря, не помню, сколько у меня свап был.
A
Если хотите прям задеплоить кластер, а не просто взять сандбокс, то, думаю, гига не хватит
🔐
Если хотите прям задеплоить кластер, а не просто взять сандбокс, то, думаю, гига не хватит
Мы про контейнеры говорим? Просто докер вряд ли чекает размер озу при скачивании из реестра
🔐
и скрипт деплоя хортонворкс вроде тоже не чекает
A
Мы про контейнеры говорим? Просто докер вряд ли чекает размер озу при скачивании из реестра
Нет, не про докер. Никогда в докере не разворачивал. Он не чекает, но просто фейлится всё будет в процессе