Size: a a a

2020 September 25

AV

Alexandr Vladimirovi... in Data Engineers
Nikita Blagodarnyy
Тем, что это сборка. Вы же не можете пойти скачать Apache Data Platform 2.7.3.
ок, а чем тогда сборка по вашему отличается от apache отдельных компонентов?
Для меня сборка выглядит как комплексное решение с обкатанными компонентами и совместимыми между собой
источник

E

Evgeny in Data Engineers
"обкатанными, совместимыми", ну, если тесты есть ;)
источник

N

Nikita Blagodarnyy in Data Engineers
За баги не поясню, тут есть Anton Kovalenko , он большой мастак в этом вопросе.
источник

AV

Alexandr Vladimirovi... in Data Engineers
Evgeny
"обкатанными, совместимыми", ну, если тесты есть ;)
ну я предполагаю что вендор это как то тестирует перед выкладкой)
источник

E

Evgeny in Data Engineers
bigtop включает в себя тесты различных компонентов в том числе
источник

A

Anton Kovalenko in Data Engineers
Alexandr Vladimirovich
ну я предполагаю что вендор это как то тестирует перед выкладкой)
И тестируем и в процессе CI/CD применяем все нужные патчи, которые иначе надо руками ставить.
источник

N

Nikita Blagodarnyy in Data Engineers
Если честно, я не в курсе, откуда именно. Какое-то время назад вроде @xhumanoid об этом рассказывал.

Ну вот что-то похожее https://github.com/hortonworks/hadoop-release/releases/tag/HDP-3.1.5.117-1-tag
источник

AV

Alexandr Vladimirovi... in Data Engineers
Nikita Blagodarnyy
Если честно, я не в курсе, откуда именно. Какое-то время назад вроде @xhumanoid об этом рассказывал.

Ну вот что-то похожее https://github.com/hortonworks/hadoop-release/releases/tag/HDP-3.1.5.117-1-tag
это же отдельная сборка от хортона
источник

N

Nikita Blagodarnyy in Data Engineers
Alexandr Vladimirovich
Всем привет, подскажите CDH с версии 6.3.3 стала полностью коммерческой? А то на сайте я так понимаю без подписки ее скачать нельзя
Что сейчас есть из свободно распространяемых сборок Hadoop кроме ванили?
ну а вам не сборка нужна?
источник

AV

Alexandr Vladimirovi... in Data Engineers
а сборку от арены можно свободно использовать? Платить надо будет только за поддержку и ADCM?
источник

AV

Alexandr Vladimirovi... in Data Engineers
Nikita Blagodarnyy
ну а вам не сборка нужна?
именно она, просто это сборка от другого вендора (хоть и они вроде как слились в одну компанию)
источник

A

Anton Kovalenko in Data Engineers
Alexandr Vladimirovich
а сборку от арены можно свободно использовать? Платить надо будет только за поддержку и ADCM?
На сайте у нас есть СЕ-версия, свободная для скачивания и использования.
Плата за ее поддержку дело сугубо добровольное )
ADCM у нас в опен-сорсе на Гите.
источник

A

Anton Kovalenko in Data Engineers
Условия использования СЕ (EULA) там же. Можете почитать. Для внутреннего использования можно использовать без ограничений.
источник

AV

Alexandr Vladimirovi... in Data Engineers
Anton Kovalenko
Условия использования СЕ (EULA) там же. Можете почитать. Для внутреннего использования можно использовать без ограничений.
спасибо за информацию)
источник

Д

Дмитрий in Data Engineers
Дистрибутив необходимо выбирать по версиям продуктов которые в него входят. Если выбраный дистрибутив будет эксплуатироваться с другим продуктом, то необходимо смотреть совместимость этих продуктов. Если явно не прописано  то все грабли твои и риски тоже.
источник

ПФ

Паша Финкельштейн... in Data Engineers
Ждём дистрибутив с третьим спарком!
источник
2020 September 26

nn

nasdaq nice in Data Engineers
А кто-нибудь пользовался хадупом от аренадаты? какие ощущения остались? а то мне наверное предстоит...
источник

PK

Pavel Kashchenko in Data Engineers
nasdaq nice
А кто-нибудь пользовался хадупом от аренадаты? какие ощущения остались? а то мне наверное предстоит...
Ходуп, как ходуп. Версия спарка достаточно древняя, это вызывает некую печаль. А так вполне норм.
источник

DT

Denis Tsvetkov in Data Engineers
Pavel Kashchenko
Ходуп, как ходуп. Версия спарка достаточно древняя, это вызывает некую печаль. А так вполне норм.
А как он керберизуется, есть ли сюрпризы в сравнении с ванилью и другими?
источник

PK

Pavel Kashchenko in Data Engineers
Denis Tsvetkov
А как он керберизуется, есть ли сюрпризы в сравнении с ванилью и другими?
До керберезации пока не дошли.
источник