Size: a a a

2020 December 09

A

Alex in Data Engineers
они лишь вынесены на кнопки, в плане сорцов тот же хадуп плюс набор бекпортов
источник

KS

K S in Data Engineers
Сейчас я даже тупо не могу найти файлы по маске, потому что hdfs -find урезанный
источник

A

Alex in Data Engineers
в клоудере такой же будет
источник

KS

K S in Data Engineers
Alex
в клоудере такой же будет
Там у них я видел jar который ближе к линуксовому find
источник

N

Nikita Blagodarnyy in Data Engineers
Если вы не умеете в ансибл и прочие эликтрификаторы, то Ambari/Cloudera Manager/ADCM будет большим подспорьем.
источник

A

Alex in Data Engineers
K S
Там у них я видел jar который ближе к линуксовому find
О_о с чего бы это, первый раз такое слышу
источник

A

Alex in Data Engineers
Nikita Blagodarnyy
Если вы не умеете в ансибл и прочие эликтрификаторы, то Ambari/Cloudera Manager/ADCM будет большим подспорьем.
да, но это именно как подспорье в администрировании
с точки зрения хадупа код не сильно отличается
в основном бекпортами
источник

KS

K S in Data Engineers
Alex
О_о с чего бы это, первый раз такое слышу
Ну или я не нашёл как например найти файлы модифицированные за последний день больше размера Х
источник

A

Alex in Data Engineers
а в клоудере как вы через find это делаете?
источник

A

Alex in Data Engineers
мне даже интересно стало
источник

KS

K S in Data Engineers
Nikita Blagodarnyy
Если вы не умеете в ансибл и прочие эликтрификаторы, то Ambari/Cloudera Manager/ADCM будет большим подспорьем.
А они на любой дистрибутив устанавливаются?
источник

A

Alex in Data Engineers
обычно сразу их ставят
а дальше под них пакеты собранные идут
источник

A

Alex in Data Engineers
у амбари обычно от хортона
у клоудеры клоудеровские тянутся
адсм свои предлагает
источник

A

Alex in Data Engineers
вот только мне интересно откуда вы клоудеру брать будете если они закрыли свои бесплатные сборки уже
источник

KS

K S in Data Engineers
Alex
а в клоудере как вы через find это делаете?
Я видел jar который принимает параметры стандартного find
источник

A

Alex in Data Engineers
можно пример?
источник

KS

K S in Data Engineers
Alex
вот только мне интересно откуда вы клоудеру брать будете если они закрыли свои бесплатные сборки уже
🤷‍♂
Мопед не мой, но работает кое как.
источник

A

Alex in Data Engineers
так название jar хоть скажите
источник

A

Alex in Data Engineers
вроде нашёл HdfsFindTool
источник

A

Alex in Data Engineers
правда солр не обязательно будет у вас стоять, чтобы он заработал
источник