Size: a a a

2021 October 05

AA

Anton Alekseev in Data Engineers
Эээх, вот только это очередь с лычками, а не знаниями. Как в том же де, вот и выходит что вопрос не совсем корректный, ибо опыт необходимый для нынешних мидл ДС гораздо меньше чем для мидл ДЕ, имхо
источник

AA

Anton Alekseev in Data Engineers
Так что очередь из ДС быстро рассасывается, когда начинаешь минимальные требования к ним устанавливать, итого выходит что не так много кандидатов, скорее много работы HR по отсеиванию
источник

AZ

Anton Zadorozhniy in Data Engineers
В базе хранить, пополнять из инвентори S3
источник

VP

Vitaly Pismarev in Data Engineers
Питонячить свои скрипты?
источник

AZ

Anton Zadorozhniy in Data Engineers
Да, более того у вас скорее всего уже есть какая то аналитика по инвентори, туда добавить просто
источник

VP

Vitaly Pismarev in Data Engineers
я слышал что чем-то собирают стату по каталогам s3 и хранят в csv формате. Но самой структуры маловато, хочется пропихнуть какой-нить description ещё. В моей фантазии это какой-нить тэг который развернётся в вольное описание того что в каталоге лежит. Такое вообще реализуемо? Я с s3 не работал вообще, но вроде возможность вешать тэги есть )
источник

AZ

Anton Zadorozhniy in Data Engineers
В смысле чём-то собирают? Амазон вам собирает, вы дальше ее обрабатываете, тоже самое что с аналитикой fsimage на хадупе
источник

AZ

Anton Zadorozhniy in Data Engineers
источник

N

N in Data Engineers
Всем привет хочу изучить спарк, подскажите стоит ли себе взять книгу spark в действии?
источник

А

Александр in Data Engineers
я изучал по Spark_The_Definitive_Guide_Big_Data
источник

ИК

Иван Калининский... in Data Engineers
Я начинал с Холден Карау, Рейчел Уоррен «Эффективный Spark. Масштабирование и оптимизация.»
источник

🌌[

🌌El.Randir/42ᅠ [AD]... in Data Engineers
Всем привет, есть вопрос:
Какие есть средства визуализации данных, но опен-сурс, чтобы можно было и пощупать, и если что в прод пустить. :)
источник

T

T in Data Engineers
Superset не плох
источник

RS

Roma S in Data Engineers
графана? %)
источник

🌌[

🌌El.Randir/42ᅠ [AD]... in Data Engineers
Ахахаха
источник

RS

Roma S in Data Engineers
непонятно как/что визуализировать хочется
источник

VP

Vitaly Pismarev in Data Engineers
У нас метабейз юзают
источник

🌌[

🌌El.Randir/42ᅠ [AD]... in Data Engineers
Ну что-то вроде Табло
источник

PS

Pavel Sivash in Data Engineers
Метабейз/суперсет
источник

ПФ

Паша Финкельштейн... in Data Engineers
Чатик, я вам новый дайджест принёс!
https://jb.gg/ectvj9
источник