AE
а сам по себе с3 это к/в хранилище
то что нет какого-нибудь редшифта или вертики говорит что нет адхок аналитики и большого корпуса отчетности
то что нет Динамы или Кассандры говорит что нет low latency ворклоада
Size: a a a
2021 October 25
AE
отчётность есть, но настолько замороченная и каждый раз отличная от предыдущей, что аналитики делают её пандасом и такой-то матерью
AE
эт конечно не в кайф
A
мы видимо про разную аналитику говорим
AZ
ну вот, а если были какие-нибудь табло или пауэрбиай - то нужен был бы отзывчивый SQL движок
A
табло есть
A
часть в табло
часть в метабейз дашбордики рисовать для девелоперов
часть в метабейз дашбордики рисовать для девелоперов
AE
тепловые карты у нас, табла нету
AZ
да я так и понял, вертика и импала не просто так же
A
ещё запущен sparksql, но задержки у него повыше, поэтому для дашбордов не всегда удобно
A
для аналити норм
AE
табло нужно тем, кто покупает нашу дату через safegraph %)
AZ
я про это и говорю, у вас по сути не аналитический ландшафт из даталейков хранилищ и витрин, а узкоспециальная система для вашего домена
AE
ну такой она далеко не сразу стала. до ковида мы несколько лет пытались в витрины
AE
а потом рыночек решил, что надо искать иной подход
AZ
Думаю и бизнеса были амбиции получить больше разных данных, такое часто бывает в этом бизнесе
AE
ну, задача по автоматизации витрин была весьма интересной. я почти год потратил. оч. жалко было потом пускать под нож. а аналитик, который занимался постановкой, вообще уволился
AE
изначально хотели дать кастомерам инструмент для самостоятельно персонализации витрин по всему нашему массиву
SS
уже спрашивал, но толком ответа не получил... потому повторюсь:
коллеги, кто какие инструменты использует для моделирования всего ландшафта DataLake?
нужно нечто вроде DataCatalog/DG/MDM-системы, но с удобным инструментом для заведения данных, для их моделирования
коллеги, кто какие инструменты использует для моделирования всего ландшафта DataLake?
нужно нечто вроде DataCatalog/DG/MDM-системы, но с удобным инструментом для заведения данных, для их моделирования