Size: a a a

2020 December 15

N

Nikita Blagodarnyy in Data Engineers
Sergey Kaurov
Фифо? 😄
читани доку, там инфа 146%.
источник

SK

Sergey Kaurov in Data Engineers
7 серверов в кластере
источник

AZ

Anton Zadorozhniy in Data Engineers
это какая-то смолл дата
источник

N

Nikita Blagodarnyy in Data Engineers
и каждый по 8 гигов ярну отдает? на 1 маленький контейнер хватит.
источник

SK

Sergey Kaurov in Data Engineers
Ещё задачку поставили оптимизировать конфигурацию.. Что тут можно оптимизировать даж не знаю (балансировку сделал)
источник

AZ

Anton Zadorozhniy in Data Engineers
просто на постгрю все перенести?
источник

N

Nikita Blagodarnyy in Data Engineers
Anton Zadorozhniy
это какая-то смолл дата
на распбери пиай
источник

AZ

Anton Zadorozhniy in Data Engineers
шутки-шутками а там уже 8 гиговые пай продаются
источник

RI

Rudnev Il’ya in Data Engineers
мб в zeppelin'e меньше ресурсов выделить под спарк?
источник

AZ

Anton Zadorozhniy in Data Engineers
и 4 ядра
источник

AZ

Anton Zadorozhniy in Data Engineers
это кластер вдвое меньше моей рабочей станции, которая из консьюмерских компонентов
источник

N

Nikita Blagodarnyy in Data Engineers
у тебя 96 гигов RAM?
источник

AZ

Anton Zadorozhniy in Data Engineers
128
источник

SK

Sergey Kaurov in Data Engineers
Max Efremov
можно в веб UI ярна зайти и глянуть, что там с очередями
Это ip:8088/ui?
источник

ME

Max Efremov in Data Engineers
я про это
источник

ME

Max Efremov in Data Engineers
Sergey Kaurov
Фифо? 😄
источник

ME

Max Efremov in Data Engineers
По дефолту (в EMR точно) капасити с одной очередью, т.е. по сути fifo получается
источник

ME

Max Efremov in Data Engineers
только чтобы кластер локально гонять?
источник

ME

Max Efremov in Data Engineers
Я думаю в новый комп 64 поставить, но немного сомневаюсь...
источник

SK

Sergey Kaurov in Data Engineers
Max Efremov
По дефолту (в EMR точно) капасити с одной очередью, т.е. по сути fifo получается
А для моей задачи Fair Sheduler лучше?
источник