Size: a a a

2021 July 13

LL

Lyudmila Lapitskaia in Data Engineers
Привет, чат. Кто-нибудь знает, какой самый хороший способ иметь обновляемый кэш в structured streaming 2.3?
Причём кэш должен в идеале распространяться с драйвера, так как это результат маленькой Спарк джобы.
Возможно ли это в принципе?
Один раз сделать broadcast понятно как, но во время работы streaming query, не понятно, как его зареброадкастить и можно ли как-то это сделать
источник

D

Dmitry Girichev in Data Engineers
А кто ж вы такой? Тусуетесь с дата инженерами, говорите на околодатаинженерные темы, программируте судя по всему.
источник

S

Sebastian in Data Engineers
девопс для дата инженеров мб
источник

D

Dmitry Girichev in Data Engineers
ниплохая наверное наверное специальность )
источник

ПБ

Повелитель Бури... in Data Engineers
датаинженер, которому нужен девопс - плохой датаинженер 🙊
источник

VM

Victor Mikhaylov in Data Engineers
А ещё датаинженер может принтер починить
источник

N

Nikita Blagodarnyy in Data Engineers
Вам виднее.
источник

AZ

Anton Zadorozhniy in Data Engineers
Последние пару лет я в продуктовой организации пишу инструменты для сатанистов, а до этого консалтил и строил всякие даталейки, стриминг
источник

AZ

Anton Zadorozhniy in Data Engineers
Девопс, как известно, это не человек
источник

S

Sebastian in Data Engineers
тащемта, аналитик сам етл может писать еще. дата инженеры не нужны
источник

h

helby in Data Engineers
HR сами могут создавать продукты, анализировать его, тестировать
Персонал не нужен)))
источник

S

Sebastian in Data Engineers
это сарказм
источник

h

helby in Data Engineers
Я в курсе)
источник

NN

No Name in Data Engineers
Да все мы тут балласт
источник

A

Aleksey in Data Engineers
Coming out какой-то начался. Я тоже не дата инженер 😎
источник

ПБ

Повелитель Бури... in Data Engineers
источник

ME

Mikhail Epikhin in Data Engineers
А тут есть data engineers вообще?
источник

VK

Viacheslav Korchagin in Data Engineers
Да
источник

OP

O. Petr in Data Engineers
психологически ?
источник

NN

No Name in Data Engineers
Нет, конечно
источник