Size: a a a

2021 March 30

SS

Sergey Sheremeta in Data Engineers
T
cp
а разве не лучше использовать в этом случае distcp? если мне не изменяет память - "cp" прогоняет блоки данных через gateway-машину (на которой запускают "hdfs dfs -cp"), тогда как "distcp" создает MapReduce-задание на копирование
источник

SS

Sergey Sheremeta in Data Engineers
Vlad
Какую команду необходимо написать чтоб скопировать file.txt размером 10 Тб из ПАПКИ /data/ в /tmp/
папки "/data", "/tmp" - в HDFS, в s3, в локальной файловой системе?
источник

T

T in Data Engineers
Sergey Sheremeta
а разве не лучше использовать в этом случае distcp? если мне не изменяет память - "cp" прогоняет блоки данных через gateway-машину (на которой запускают "hdfs dfs -cp"), тогда как "distcp" создает MapReduce-задание на копирование
В вопросе про hdfs ничего не было. Какой вопрос такой ответ
источник

UR

Uncle Ruckus in Data Engineers
T
В вопросе про hdfs ничего не было. Какой вопрос такой ответ
Придут со вторым вопросом, почему по памяти отваливается
источник

UR

Uncle Ruckus in Data Engineers
уж лучше сразу
источник

T

T in Data Engineers
Uncle Ruckus
Придут со вторым вопросом, почему по памяти отваливается
Или не прийдут
источник

AZ

Anton Zadorozhniy in Data Engineers
сразу видно людей которые работали в опсе
источник

e

er@essbase.ru in Data Engineers
Алексей
Кто-нить пользовался БД Terrarium - это правда что они заявляют?
Миловидов в курсе ? 😂
источник

NN

No Name in Data Engineers
er@essbase.ru
Миловидов в курсе ? 😂
А кто это?
источник

NN

No Name in Data Engineers
Хотя у меня ощущение, что я уже спрашивал
источник

e

er@essbase.ru in Data Engineers
No Name
А кто это?
источник

NN

No Name in Data Engineers
Ага, пасиб
источник

S

Stanislav in Data Engineers
А подскажите по фениксу. Делаю хбейз снепшот текущей таблицы феникса, создаю из него хбейз таблицу, вешаю сверху вью(или таблицу феникса), во всех ключевых полях значения есть, все колонки пустые. Хотя через хбейз все колонки заполненные, снепшот восстановлен верно и целиком.
источник

S

Stanislav in Data Engineers
Что надо скормить фениксу, чтобы он прозрел блеат
источник

SS

Sergey Sheremeta in Data Engineers
Stanislav
Что надо скормить фениксу, чтобы он прозрел блеат
@ox62ash наверняка знает )
источник

S

Stanislav in Data Engineers
copytable работает, но он мегатормозной (
источник

SS

Sergey Sheremeta in Data Engineers
если посмотреть на описания столбцов исходной Phoenix-таблицы и таблицы-копии в SYSTEM.CATALOG - есть различия?
источник

Н

Никита in Data Engineers
А подскажите плс сервисы совместного кодирования в окошке для интервьюирования
источник

NB

Nikita Bakanchev in Data Engineers
Никита
А подскажите плс сервисы совместного кодирования в окошке для интервьюирования
бесплатных хороших не нашел, codeinterview.io показался неплохим с триальным периодом
источник

T

T in Data Engineers
Никита
А подскажите плс сервисы совместного кодирования в окошке для интервьюирования
У Hackerrank есть продукт для интервью, там ещё вайтборд дают
источник