Size: a a a

2021 September 18

AZ

Anton Zadorozhniy in Data Engineers
нет, а вот те кто пишут инструменты для ДЕ - могут использовать
источник

DZ

Dmitry Zuev in Data Engineers
А ДЕ пишут для ДЕ инструменты?
источник

AZ

Anton Zadorozhniy in Data Engineers
конечно
источник

DZ

Dmitry Zuev in Data Engineers
Парадокс Рассела получается
источник

AZ

Anton Zadorozhniy in Data Engineers
не все конечно, но часто бывает
источник

ЕК

Егор Куган in Data Engineers
всем привет
подскажите, пожалуйста, правильно ли я понимаю, что google pub/sub и кафку используют в одних и тех же целях? если нет, то в чем принципиальная разница?
источник

ЕК

Егор Куган in Data Engineers
кроме того, что паб саб - облачная технология
источник

AZ

Anton Zadorozhniy in Data Engineers
Кафка это распределённый лог, пабсаб это классическая очередь (хотя умеет теперь повторную доставку), у вас какой сценарий?
источник

ЕК

Егор Куган in Data Engineers
ещё никакого, учусь)
источник

ЕГ

Евгений Глотов... in Data Engineers
Спарк выучил?
источник

ЕГ

Евгений Глотов... in Data Engineers
Если да - иди работай)
источник

ЕГ

Евгений Глотов... in Data Engineers
Если нет - иди учи спарк, а потом п.1)
источник

NN

No Name in Data Engineers
На работе выучит)
источник

AS

Andrey Smirnov in Data Engineers
Хаскель в криптe?
источник

AS

Andrey Smirnov in Data Engineers
Плюсую, стандарт де-факто в мире питона, я патчил кликхаус драйвер для superset, там тоже все на ней
источник

AS

Andrey Smirnov in Data Engineers
Я думаю использование orm востребовано как раз когда куча конекторов к разным базам (тот же superset). Но за 15 лет пару раз сталкивался с переездом с одной базы на другую, если не использовались бы специфичные вещи БД было бы довольно просто (да, это про оракл/mssql -> PostgreSQL)
источник

DZ

Dmitry Zuev in Data Engineers
а зачем супрсету ормка? Для своих настроек, то да, это логично. Это как любая CMS, должна работать на любой бд.
источник

DZ

Dmitry Zuev in Data Engineers
Но все равно, скорее всего там очень кондовый ддл будет накатан, а все остальное накатываешь руками
источник

AS

Andrey Smirnov in Data Engineers
Платят не за языки, когда это поймут люди. В расте сейчас платят много из-за горячей темы с криптой, там такие люди на расхват. Го в бекенде сейчас король, ходят вон слухи что твиттер переписывают со скалы. Скала пока это бигдата, но датабрикс упорно тащит питон
источник

AS

Andrey Smirnov in Data Engineers
Для подключения к разным базам как источникам данных
источник