В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

1927 membersпожаловаться на группу
2020 August 10

A

Alex in Data Engineers
Повелитель Бури
При добавлении нод cloudera были добавлены не по fqdn а ip. Решили поменять на  fqdn. Но менеджер продолжает видеть имена ip
Там же с самого начала она проверяет что хостнейм норм резолвится, иначе говорит ошибку

Были пару раз кривые конфигурации днс у нас
источник
10:29пожаловаться#1

ПБ

Повелитель Бури... in Data Engineers
Alex
Там же с самого начала она проверяет что хостнейм норм резолвится, иначе говорит ошибку

Были пару раз кривые конфигурации днс у нас
Как лечили? Nslookup по fqdn работает
источник
10:30пожаловаться#2

ПБ

Повелитель Бури... in Data Engineers
Пинги идут
источник
10:30пожаловаться#3

ПБ

Повелитель Бури... in Data Engineers
Ругается host unresolved
источник
10:31пожаловаться#4

A

Alex in Data Engineers
Никак, там именно косяки дхцп и днс были

То есть на один айпи висело хостнейма, в итоге хост стартовал и чере nslookup проверял что он есть А, а потом валило что кто-то к нему как к Б ломится
источник
10:31пожаловаться#5

A

Alex in Data Engineers
Повелитель Бури
Ругается host unresolved
Смотрите днс, кто что отдаёт, что у вас в hosts, возможно dns cache, и тд
источник
10:32пожаловаться#6

SS

Sergey Sheremeta in Data Engineers
коллеги, доброе утро!
кто-то настраивал 2 spark shuffle service (от разных версий Spark) на одном YARN-кластере? это вообще возможно?
источник
10:37пожаловаться#7

AZ

Anton Zadorozhniy in Data Engineers
Повелитель Бури
Ругается host unresolved
должен работать прямой и обратный резолюшен
источник
10:39пожаловаться#8

ПБ

Повелитель Бури... in Data Engineers
Это требование клоудеры?
источник
10:55пожаловаться#9

A

Alex in Data Engineers
клоудера это енфорсит на установке, но вообще это желлательно и в обычном, чтобы проблем не ловить
источник
10:55пожаловаться#10

PA

Polina Azarova in Data Engineers
Повелитель Бури
Да с клоудерой намучился. Все конфиги нода запоминает. Даже если remove. А в докере можно будет все очищать без артефактов
такое может быть, если использовать cloudera manager
проще напрямую конфиги менять и не пользоваться этой шайтан-машиной
источник
11:01пожаловаться#11

ПБ

Повелитель Бури... in Data Engineers
все советуют переходить на hdp  + ambari )
источник
11:02пожаловаться#12

D

Dmitry Girichev in Data Engineers
Повелитель Бури
все советуют переходить на hdp  + ambari )
почему?
источник
11:02пожаловаться#13

A

Alex in Data Engineers
тут уже обсуждалось что амбари полумёртв
источник
11:02пожаловаться#14

A

Alex in Data Engineers
как хортона купили
источник
11:03пожаловаться#15

A

Alex in Data Engineers
была надежда на открытие самого клоудера менеджера, но что-то всё заглохло
источник
11:03пожаловаться#16

A

Alex in Data Engineers
если вы в русской конторе, то вроде как аренадата что-то из скриптов оркестрации даёт вменяемое
тут есть представители, но у себя я не пробовал
источник
11:04пожаловаться#17

A

Alex in Data Engineers
упс, они даже плейбуки открыли какие-то
https://github.com/cloudera/cloudera-playbook
GitHub
cloudera/cloudera-playbook
Cloudera deployment automation with Ansible. Contribute to cloudera/cloudera-playbook development by creating an account on GitHub.
источник
11:05пожаловаться#18

ПБ

Повелитель Бури... in Data Engineers
спасибо, сейчас посмотрю )
источник
11:05пожаловаться#19

AZ

Anton Zadorozhniy in Data Engineers
вообще лучше напрячь поддержку, они подскажут как перезапустить агента с большим количеством логов, и как быстрее отладить проблемы с ДНС
источник
11:26пожаловаться#20