Size: a a a

2019 December 15

AY

Andrew Ya in Data Engineers
Артур Семенов
а с хадупом можно через пайтон взаимодействоать ?
Можно. Hadoop Streaming API
источник

OI

Oleg Ivchenko in Data Engineers
Артур Семенов
а с хадупом можно через пайтон взаимодействоать ?
И ещё всяки либы вроде mrjob, pydoop...
источник

АС

Артур Семенов in Data Engineers
кто-нибудь локально разворачивал хадуп?
источник

ME

Max Efremov in Data Engineers
Hdfs под виндой
источник

ME

Max Efremov in Data Engineers
Map reduce вроде тоже
источник

OI

Oleg Ivchenko in Data Engineers
Артур Семенов
кто-нибудь локально разворачивал хадуп?
А в какой компании ещё с Хадупом работают?
источник

OI

Oleg Ivchenko in Data Engineers
Я в контейнере  настраивал.
источник

АС

Артур Семенов in Data Engineers
Oleg Ivchenko
А в какой компании ещё с Хадупом работают?
а что, это уже не модно? ну в Сбере
источник

OI

Oleg Ivchenko in Data Engineers
Артур Семенов
а что, это уже не модно? ну в Сбере
А, круто что такие большие компании с ним работают, я тоже люблю хадуп )
Просто как раз на последнем Moscow spark обсуждали то, что от него постепенно отказываются.
источник

АЖ

Андрей Жуков in Data Engineers
Oleg Ivchenko
А, круто что такие большие компании с ним работают, я тоже люблю хадуп )
Просто как раз на последнем Moscow spark обсуждали то, что от него постепенно отказываются.
Как от винды примерно
источник

АС

Артур Семенов in Data Engineers
Oleg Ivchenko
А, круто что такие большие компании с ним работают, я тоже люблю хадуп )
Просто как раз на последнем Moscow spark обсуждали то, что от него постепенно отказываются.
отказываются в пользу чего?
источник

ME

Max Efremov in Data Engineers
Oleg Ivchenko
А, круто что такие большие компании с ним работают, я тоже люблю хадуп )
Просто как раз на последнем Moscow spark обсуждали то, что от него постепенно отказываются.
Не все могут в облако перейти
источник

ME

Max Efremov in Data Engineers
Или отказ в пользу дистрибутивов?
источник

OI

Oleg Ivchenko in Data Engineers
Артур Семенов
отказываются в пользу чего?
Тот же Spark
источник

ME

Max Efremov in Data Engineers
Под hadoop понимается map reduce?
источник

АЖ

Андрей Жуков in Data Engineers
Oleg Ivchenko
Тот же Spark
источник

АС

Артур Семенов in Data Engineers
Oleg Ivchenko
Тот же Spark
т.е имеет смылс сместиться в сторону спарка?
источник

OI

Oleg Ivchenko in Data Engineers
Артур Семенов
т.е имеет смылс сместиться в сторону спарка?
Смотря какие задачи стоят.
источник

АЖ

Андрей Жуков in Data Engineers
Артур Семенов
т.е имеет смылс сместиться в сторону спарка?
От чего?
источник

АС

Артур Семенов in Data Engineers
Max Efremov
Под hadoop понимается map reduce?
под хадупом я имею ввиду сам хадуп, и все, что в моем понимании "крутится вокруг него, hdfs hive ctl и тд
источник