Я знаю только про ТСЕ, но это можно отвязать от хдфс, это на клиенте все происходит

Квоты и политики на s3

Руками я могу конечно нафигачивать эти json-ы, но это я :)

Просто для среднего админа запуск минио против запуска все инфраструктурных мастер сервисов хдфс выглядит как нечестное соревнование))

Они там щас зоны прикручивают во всю, уже есть в апстриме, будет рост/ресайз кластера без федерации, дальше будут как раз метаданные расширять и накручивать секьюрити, чтобы как даталейк формейшен было

Общался тут с ними перед праздниками

С озоном странно

Взяли и вытащили из гита хадупа

🙄лизардфс тоже много чего делают, годы уже

😐ровно до тех пор пока минио не скажет "ой я сломалось"

Хайв 3.1 в сборке хортона материться хочется

https://issues.apache.org/jira/browse/HIVE-20001

В апстрим не приняли но хортоны говно себе вкомитили

Причём логики я до сих пор патча не улавливаю:

Если пользователь попросил создание таблицы (мэнеджет стрикт отключен, так что как таковое это экстернал) и указал директорию (используем spark sql, там можно default warehouse dir указать), то

1) создадим по указанному пути фолдер но с пермишенами hive пользователя (следовательно спарк уже туда не попишет)
2) создадим в дефол локейшене ещё один фолдер но уже с пользовательскими правами

Ну это помимо что когда это двойное создание делали не везде поправили копипасту, поэтому логи кривые выводит

есть еще хопсворкс со своей неймнодой поверх мускл кластера и аутентификацией по сертификатам 🙂

Ну вот серты это прям бальзам на душу

После возни со всеми сортами кербероса, и "вы тут опять нам контроллер домена уложили"

вот, а запустив в стенделоун хайв метастор эта проблема неактуальна 🙂

Нууууу, у нас хдфс и много, плюс импала активно используем

Напомните, а была "программа" развития после мержа без булшита

Например мы "закопаем куду/хайв/етц через два года"

а вы на хортон завязаны?