Size: a a a

2019 December 16

АЖ

Андрей Жуков in Data Engineers
Huge Data Platform или как его там
источник

АС

Артур Семенов in Data Engineers
Nikita Blagodarnyy
У вас же есть свой сбердуп. Презентовали его тут недавно.
Ага))
источник

АС

Артур Семенов in Data Engineers
Nikita Blagodarnyy
У вас же есть свой сбердуп. Презентовали его тут недавно.
Я бы вам ответил как есть, да боюсь что ситуация до смеха абсурдая
источник

A

Alex in Data Engineers
уверен мы все тут с удовольствием выслушаем =)
источник

OI

Oleg Ilinsky in Data Engineers
Alex
уверен мы все тут с удовольствием выслушаем =)
источник

A

Alex in Data Engineers
хадуп это во многих местах смех сквозь слёзы
источник

N

Nikita Blagodarnyy in Data Engineers
Ну ладно, а сберклауд? Обещали же облако для каждого, и пусть никто не уйдет обиженным (без хадупа)?
источник

K

KrivdaTheTriewe in Data Engineers
в другое место плиж
источник

AP

Andrey Prokhorov in Data Engineers
Артур Семенов
кто-нибудь локально разворачивал хадуп?
Да, разворачивал. Локально на тачке, но в докере.
источник

AP

Andrey Prokhorov in Data Engineers
Здесь вот примеры контейнеров https://github.com/big-data-europe
источник

AP

Andrey Prokhorov in Data Engineers
Если грамотно скомбинировать то работает hdfs, yarn, mr, hive, spark
источник

АС

Артур Семенов in Data Engineers
Andrey Prokhorov
Да, разворачивал. Локально на тачке, но в докере.
А зачем в докере?
источник

A

Alex in Data Engineers
для тестов иногда нужно
источник

AP

Andrey Prokhorov in Data Engineers
Особого замысла не было. Просто удобство докера как изоляции, в том числе по ресурсам. 12 gb на хадуп, 12 на хром 😂
источник

V

Vladislav Gotsulyak in Data Engineers
Артур Семенов
А зачем в докере?
Установка в пару кликов
источник

АС

Артур Семенов in Data Engineers
Vladislav Gotsulyak
Установка в пару кликов
Я просто ещё не пользовался докером, какие плюсы перед обычной локальной установкой?
источник

RF

Ruslan Fialkovsky in Data Engineers
Артур Семенов
кто-нибудь локально разворачивал хадуп?
Ванильный или от вендора?
А в чем проблема? Есть hortonwprks hdp sandbox там все готовое, достаточно подключить образ в virtualbox
источник

V

Vladislav Gotsulyak in Data Engineers
Артур Семенов
Я просто ещё не пользовался докером, какие плюсы перед обычной локальной установкой?
Ответ выше, намного быстрее установить
источник

АС

Артур Семенов in Data Engineers
Vladislav Gotsulyak
Ответ выше, намного быстрее установить
А если я не готов 12 выделять, максимум 3)
Как с ним потом взаимодействовать
источник

V

Vladislav Gotsulyak in Data Engineers
Артур Семенов
А если я не готов 12 выделять, максимум 3)
Как с ним потом взаимодействовать
Настраиваешь себе в виртуалбоксе конфиг и в нем собираешь
источник