A
Ну в общем-то на лету получается, только sla большой
совсем как тут с sla
Size: a a a
2020 July 31
AK
это slow latency
т.е. если я думаю "затащить presto, или попробовать llap", то последний даже не смотреть?
N
llap если не медленнее, то точно не ощутимо быстрее
N
он сокращает время на старт, потому что приложение висит в памяти в slider и какие-то контейнеры он уже себе отъел
AZ
т.е. если я думаю "затащить presto, или попробовать llap", то последний даже не смотреть?
llap намного менее зрелая технология
UD
престу затаскивать только в отдельный кластер либо ярн отрубать
AK
престу затаскивать только в отдельный кластер либо ярн отрубать
а в самом ярне её крутить?
UD
а в самом ярне её крутить?
не разумеет в ярн
UD
слайдер мертв, в ярн сервисы не умеет
UD
шафлится в директории yarn local тоже
AK
принято, спасибо за инфо
UD
либо тестить это https://github.com/prestodb/presto/issues/13856
UD
сейчас я выкручиваюсь тем что откусил ресурсы у ярна, и используем джентльменское соглашение
А
llap еще буферный кэш держит между разными сессиями
UD
не пускать тензорфлоу и престу одноврменно, а ресурсы свободные смотреть в прометее
UD
вместо морды ярна
AZ
Если у вас энтерпрайз то имеет смысл посмотреть на престо дистрибутив Starburst - из коробки бежит в k8s, есть масса полезных коннекторов и улучшений по сравнению с prestodb/prestosql
2020 August 01
АЖ
Если у вас энтерпрайз то имеет смысл посмотреть на престо дистрибутив Starburst - из коробки бежит в k8s, есть масса полезных коннекторов и улучшений по сравнению с prestodb/prestosql
*если у вас энтерпрайз и есть бюджет
K
Нет, зачем нам такое, просто тащит данные из объектного стораджа
Прям из кеша процессоров аппаратной платформы
ПБ
Доброе утро! Подскажите пожалуйста нужно в hdfs 2 parquet джойнить по расписанию. Hive норм? Или спарки городить? Спасибо