Size: a a a

2020 October 22

nn

nasdaq nice in Data Engineers
Nikita Blagodarnyy
или древний песочек от хортона поднять без докера в хипер-В
да, сейчас гоняем старую виртуалку от клаудеры
но она старая, хотим обновить
из нового есть от hortonworks HDP sandbox
но она жирнючая блин
источник

UD

Uncel Duk in Data Engineers
Nikita Blagodarnyy
а есть готовый бокс с ванилой?
на счет бокса хз, можно это слегка поправить https://github.com/alexclear/hbase-lab
источник

AE

Alexey Evdokimov in Data Engineers
всл2 на thin vm таки сильно меньше жрёт, чем полноценная виртуалка, а по скорости ровно то же самое
источник

N

Nikita Blagodarnyy in Data Engineers
nasdaq nice
да, сейчас гоняем старую виртуалку от клаудеры
но она старая, хотим обновить
из нового есть от hortonworks HDP sandbox
но она жирнючая блин
на самом древнем корай7 и 16 Гб сносно коптит
источник

AE

Alexey Evdokimov in Data Engineers
и для всл2 можно сделать образ, оно умеет в экспорт/импорт
источник

AE

Alexey Evdokimov in Data Engineers
hdp sanbdox надо 12 гигов минимум, иначе совсем невозможно
источник

GP

Grigory Pomadchin in Data Engineers
Alexey Evdokimov
всл2 на thin vm таки сильно меньше жрёт, чем полноценная виртуалка, а по скорости ровно то же самое
+
источник

GP

Grigory Pomadchin in Data Engineers
да докеры пустить на всл2 будет лучше и все там ж потыкать просто
источник

GP

Grigory Pomadchin in Data Engineers
какойнить docker-compose up и все
источник

A

Antony in Data Engineers
nasdaq nice
Привет ребят! Знает кто-нить как хадуп чувствует себя в докере на винде?
планируем обучать интернов через докер а не через виртуалки (корпоративная ос - винда)
а что именно нужно hadoop fs делать?

а если спарк погонять почему нельзя в спарке сшелле что то показать?
источник

nn

nasdaq nice in Data Engineers
вооот и я так думаю
но как бы это все не превратилось в страдания для них
источник

nn

nasdaq nice in Data Engineers
Antony
а что именно нужно hadoop fs делать?

а если спарк погонять почему нельзя в спарке сшелле что то показать?
вроде того
теория + задачки
источник

A

Antony in Data Engineers
а почему просто на паре виртуалок не развернуть и скрипт сделать который ночью все удаляет и оставляет только то что нужно для обучения
источник

N

Nikita Blagodarnyy in Data Engineers
всл2 хороший, да? даже потрогать негде.
источник

nn

nasdaq nice in Data Engineers
Antony
а почему просто на паре виртуалок не развернуть и скрипт сделать который ночью все удаляет и оставляет только то что нужно для обучения
ахах приходит такой студент на след день
а домашки и след простыл
сложна сложна это
источник

N

Nikita Blagodarnyy in Data Engineers
Oleksandr Averchenko
Опасно, все пойдут девопсами за 300кк
прошлый век. билайн сегодня в фиде 380 предлагал.
источник

UD

Uncel Duk in Data Engineers
Nikita Blagodarnyy
прошлый век. билайн сегодня в фиде 380 предлагал.
инфляция
источник

UD

Uncel Duk in Data Engineers
теперь 600к/нс
источник

GP

Grigory Pomadchin in Data Engineers
nasdaq nice
вооот и я так думаю
но как бы это все не превратилось в страдания для них
а что ьудет меньшие страдания?
источник

GP

Grigory Pomadchin in Data Engineers
почему страдания?)
источник