DZ
Флюм вс Спарк? Я б даже не думал
Size: a a a
2019 December 13
DM
хотя скорее всего придется написать (из-за трифта)
EP
Мы используем HDP 3.1 и там вроде Flume выпилен
EP
Спасибо ребят за ответы.
DM
я не историк, но флюм вроде бы никогда и не был частью хадупа
DM
и флюм здесь лишь пример класса систем (их достаточно много)
EP
так это ж HDP а не хадуп))
DZ
я не историк, но флюм вроде бы никогда и не был частью хадупа
В Хортон входил пару лет назад
DM
это всегда был стэндэлоун апач проект
DM
то что его в коробку пихли, не значит что там что-то было полезное еще
DM
распаковал архив и пользуйся
В
Мы используем HDP 3.1 и там вроде Flume выпилен
там нифи есть в hdf
S
ну и если работать с тем же кликхаусом по наполнению надо будет не единожды, может иметь смысл рассмотреть конфигурируемые переливаторы аля флюм, кафка-коннект и прочие
kafkacat + curl
В
Мы используем HDP 3.1 и там вроде Flume выпилен
если стек инструментов не ограничен, можно вхерачить его. И прям там настроить из кафки в кх
DM
там нифи есть в hdf
уж лучше флюм или на худой конец спарк
В
уж лучше флюм или на худой конец спарк
а чем нифи то не угодил?
В
годная же штука
В
проблемы какие то есть?
DM
годная же штука
вредная
DM
она не решает проблем, только создает новые