Size: a a a

2021 October 25

AE

Alexey Evdokimov in Data Engineers
вот поднимите руку у кого не постгря, если вообще есть какя-либо база в инфре
источник

IK

Ivan Krovyakov in Data Engineers
Коллеги, в связи с известными событиями митап переводим полностью в онлайн и сдвигаем начало на 17:00, в остальном все в силе 🙂
источник

A

Alex in Data Engineers
вертика, импала, сцила/кассандра, mssql
источник

A

Alex in Data Engineers
даже в сциле/кассандре сейчас их недо-sql
источник

A

Alex in Data Engineers
постгря только-только затягивается и db тима собирается её брать на поддержку

до этого только как метасторейдж для hive менеджелось хадуп тимой
источник

AZ

Anton Zadorozhniy in Data Engineers
постгря для хранилищ и постгря которая "у всех в инфре" - это разные темы
источник

OI

Oleg Ivchenko in Data Engineers
fixed
источник

D

Den in Data Engineers
почитаю, спасибо. тут еще проблема, что софт сторонний очень сложно поставить. надо писать обоснование, долго согласовывать и потом отклонят запрос😄
источник

AZ

Anton Zadorozhniy in Data Engineers
не обязательно же брать чужое, можно вдохновиться (и написать свое)
источник

AE

Alexey Evdokimov in Data Engineers
неплохой зоопарк. легаси?
источник

A

Alex in Data Engineers
что именно легаси?
источник

A

Alex in Data Engineers
кассандра местами да, местами сцилла недостаточно ручек предоставляла, в нашем ворклоаде часть задач лучше на одной, часть на другой
источник

A

Alex in Data Engineers
вертика в проде, но так как платная для всего не будешь гонять

импала - основной sql движок, вариантов не сильно много, пока подумываем на trino уйти, слишком много последнее время с импалой заморочек, но trino в базовых тестах была значительно медленней =\ смотрим

mssql - основная база данных, кубики с неё уже уехали в хадуп, но как основная для работы продолжает использоваться по всей агоде
источник

D

Den in Data Engineers
😄 и так ресурсов нет нифига для основных задач
источник

AE

Alexey Evdokimov in Data Engineers
сам факт зоопарка. просто так сам по себе он не набирается
источник

AZ

Anton Zadorozhniy in Data Engineers
тогда у вас безвыходная ситуация, сделать что-то (адаптировать чужой софт или написать свой) без ресурсов трудно
источник

A

Alex in Data Engineers
так там нету сильно пересечения по функционалу

каждый инструмент для своей задачи
источник

AE

Alexey Evdokimov in Data Engineers
у нас была постгря (потому что геоданные, то есть постгис), была монга для кешей. чуть было не внедрили аэроспайк.

в итоге всё это нафиг грохнули, сейчас тупо лежит в с3 куча паркетов и зипованных тсв. и реестр данных сразу стало в разы проще вести
источник

A

Alex in Data Engineers
ну значит вам повезло что ваша нагрузка на это ложится
источник

AZ

Anton Zadorozhniy in Data Engineers
у вас просто очень специальный кейс
источник