Size: a a a

2019 November 26

A

Alex in Data Engineers
Аренадату уже списали?
источник

A

Amir in Data Engineers
Anton Zadorozhniy
если речь про будущее то останется только Cloudera, CDP
ок, Cloudera так Cloudera )
источник

A

Amir in Data Engineers
если есть литература ссылки на ресурсы, просьба дать, что бы предварительно можно было погрузиться в Cloudera
источник

AZ

Anton Zadorozhniy in Data Engineers
Alex
Аренадату уже списали?
я и клаудеру тоже списал, но человеку надо на чем-то учится :(
источник

N

Nata in Data Engineers
Люди добрые. Может кто натыкался на такие чудные грабельки. Кластер на железе, HDP. HA active/standby. Сдох сервер со standby nn, вот прям совсем, всё похерилось. В хортоне сервер загорелся вопросиком. Появился новый сервер с тем же именем и адресом, в кластер входить не хотел, так как "уже есть". Пришлось дропать курлами. Дропнулся, добавился. Возможности влепить nn не было. Нашла доку на сайте хортона, как вернуть standby (но там курлом ставится секондари), ну поставила с горя, естественно оно ругается, что оно секондари, а не standby. никаких пунктов про HA в меню hdfs нет. Как сделать из secondary standby?
источник

N

Nata in Data Engineers
источник

N

Nata in Data Engineers
active тем временем нормально функционирует в HA без HA )
источник

UD

Uncel Duk in Data Engineers
чет сложна
источник

UD

Uncel Duk in Data Engineers
что по факту прилетело на “новую” неймноду?
источник

N

Nata in Data Engineers
host_components/SECONDARY_NAMENODE
источник

N

Nata in Data Engineers
на нем стоит secondary NN
источник

N

Nata in Data Engineers
FATAL namenode.SecondaryNameNode (SecondaryNameNode.java:main(683)) - Failed to start secondary namenode
java.io.IOException: Cannot use SecondaryNameNode in an HA cluster. The Standby Namenode will perform checkpointing.
 at org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode.<init>(SecondaryNameNode.java:187)
 at org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode.main(SecondaryNameNode.java:681)
источник

N

Nata in Data Engineers
а кластер был/есть HA. поэтому выходит вот это.
источник

UD

Uncel Duk in Data Engineers
сложна
источник

N

Nata in Data Engineers
источник

UD

Uncel Duk in Data Engineers
хз как там амбари делает
источник

UD

Uncel Duk in Data Engineers
вам нужно скормить секондари фсимадж и эдиты
источник

UD

Uncel Duk in Data Engineers
потом импортнуть чекпоинты
источник

N

Nata in Data Engineers
ща попробую
источник

AS

Andrey Smirnov in Data Engineers
Amir
всем привет, для вхождения в изучение hadoop
какой дистрибутив лучше выбрать?
Cloudera, HortonWork или ArenaData?

ранее не использовалось
еду на обучение по hadoop, просят узнать что развернуть
с разворачивания и надо начинать обучение
источник