Size: a a a

2020 December 19

Oℕ

Oleg ℕizhnik in Data Engineers
Переслано от Alex Gryzlov
секвеньции
источник
2020 December 20

SK

Sergey Kaurov in Data Engineers
Nikita Blagodarnyy
Если нету, то иди на ресурс менеджер, там я ярн-сайт пропиши путь к файлу fair-scheduler
Не смог тогда ответить..
источник

SK

Sergey Kaurov in Data Engineers
С vi всё в норме
источник

SK

Sergey Kaurov in Data Engineers
Записал включение Fair Sheduler в yarn-site.xml уже давно, но НЕ переключилось на него, spark показывает FIFO
источник

SK

Sergey Kaurov in Data Engineers
источник

SK

Sergey Kaurov in Data Engineers
Добавил туда эти строки
источник

SK

Sergey Kaurov in Data Engineers
источник

SK

Sergey Kaurov in Data Engineers
Пишут в доке 📄 Arenadata (кстати обычный перевод с apache документации), что многие параметры в fair-sheduler.xml по умолчанию и так имеют определённые значение, я его не создавал.
источник

SK

Sergey Kaurov in Data Engineers
Есть смысл создать обязательно с каким-то минимумом? А то не заводится из за этого Fair Sheduler?
источник

SK

Sergey Kaurov in Data Engineers
При том я не знаю, что туда прописывать, так как у меня все под одним пользователем 😇 ходят
источник

SK

Sergey Kaurov in Data Engineers
anonymous
источник

SK

Sergey Kaurov in Data Engineers
Основная задача такая, что бы когда среди потока не больших запросоа за день, запрос за весь год по построению 📊 графиков не отжирал все ядра 💣💣💣💣
источник

SK

Sergey Kaurov in Data Engineers
С этим FIFO сейчас так - запрс все 49 ядер 💣 берёт и остальные стоят толпятся ждут его... 🥺
источник

SK

Sergey Kaurov in Data Engineers
- всё, все спят уже? Или 🍻 🤤
источник

SK

Sergey Kaurov in Data Engineers
источник

GP

Grigory Pomadchin in Data Engineers
Рекомендую сделать скриншот, его сфоткать, распечатать и отправить факсом чб копию в этот чат
источник

SK

Sergey Kaurov in Data Engineers
А не могу скриншот отправить в Телегу сразу,на работе запрет на мессенджеры
источник

SK

Sergey Kaurov in Data Engineers
Только так
источник

GP

Grigory Pomadchin in Data Engineers
)) понятно)
источник

SK

Sergey Kaurov in Data Engineers
У нас в КэйДжиБи только так 😅😂
источник