Size: a a a

Архитектура данных

2020 January 21

АЖ

Артем Жданов in Архитектура данных
Phil Delgyado
Непонятно, зачем до, суточных отчётов кубы и BI.
А как связано BI и частота обновления? Ладно бы OLAP вспомнили, там хоть слово on-line
источник

PD

Phil Delgyado in Архитектура данных
Ну, я просто отделяю отчёты и аналитику. Отчёты - редко, формально и обычно по основной базе.
Аналитика - может с отставанием от актуальных данных, но с визуализацией, разрезами и т.п.
источник

CO

Chern Oleksander in Архитектура данных
Phil Delgyado
Есть суточные, месячные, квартальные, годовые. BI и кубы для них не нужны )
А вот тут поспорю!
Есть бизнес продаж
Техника, продукты

Там вся отчётность на Excel/ Power BI

большая часть отчётов 90% обновляется раз в день
5% отчётность обновляется на самих магазинах (для них это важно) в ERP
и еще 5% это отчётность раз в час которая приходит или в телегу или смс или  вайбер
И какие-то редкие отчёты, которые так же вливаются в erp с региональных филиалов
источник

PD

Phil Delgyado in Архитектура данных
Кубы не пригодны в обоих сценариях. Я вообще удивился, что olap кубы ещё используются, думал что идеология уже лет пять как умерла.
источник

MS

Mikha Stas in Архитектура данных
Я вообще все что чаще суток за отчет не считаю, это уже мониторинг какой-то, имхо.
источник

DT

Denis Troyan in Архитектура данных
Phil Delgyado
Ну, я просто отделяю отчёты и аналитику. Отчёты - редко, формально и обычно по основной базе.
Аналитика - может с отставанием от актуальных данных, но с визуализацией, разрезами и т.п.
Ну, есть примеры отчётов, которые просто слепки аналитики
источник

PD

Phil Delgyado in Архитектура данных
Mikha Stas
Я вообще все что чаще суток за отчет не считаю, это уже мониторинг какой-то, имхо.
Бизнес-метрики - тоже хорошая тема, да. Но там нужно пересчитать и раз в пять секунд зачастую
источник

АЖ

Артем Жданов in Архитектура данных
Phil Delgyado
Кубы не пригодны в обоих сценариях. Я вообще удивился, что olap кубы ещё используются, думал что идеология уже лет пять как умерла.
В Power BI другой тип кубов - Tabular. Это не совсем тот MOLAP классический
источник

CO

Chern Oleksander in Архитектура данных
Mikha Stas
Я вообще все что чаще суток за отчет не считаю, это уже мониторинг какой-то, имхо.
Вроде бы в корпорации SONY один из учредителей сказал
"Если б я сразу реагировал на падение или рост рынка, мы бы сразу обанкротились"
источник

PD

Phil Delgyado in Архитектура данных
Артем Жданов
В Power BI другой тип кубов - Tabular. Это не совсем тот MOLAP классический
А появилось описание внутренности PowerBI? Год назад вообще ничего не было про содержание (как обычно у MS)
источник

PD

Phil Delgyado in Архитектура данных
И чем он другой, он умеет быстро обновляться?
источник

АЖ

Артем Жданов in Архитектура данных
Phil Delgyado
Ну, я просто отделяю отчёты и аналитику. Отчёты - редко, формально и обычно по основной базе.
Аналитика - может с отставанием от актуальных данных, но с визуализацией, разрезами и т.п.
У нас финансовый дашборд с десятком аналитик. Обновляется два раза в месяц. Чем не аналитика? Пользователь может выполнять анализ, сравнивать показатели разных регионов, считать KPI. Вполне аналитика
источник

АЖ

Артем Жданов in Архитектура данных
Phil Delgyado
И чем он другой, он умеет быстро обновляться?
Принципом совсем другой. Он может даже запросы в БД пробрасывать, чтобы near realtime сделать.
источник

PD

Phil Delgyado in Архитектура данных
Эхх.. и есть же еще такие неторопливые... Но ладно, я просто давно не встречал возможность таких редко обновляющихся дашбордов. У меня в практике отставание на сутки было недопустимым, желательно не более 15 минут
источник

PD

Phil Delgyado in Архитектура данных
Артем Жданов
Принципом совсем другой. Он может даже запросы в БД пробрасывать, чтобы near realtime сделать.
А какой принцип, есть описание архитектуры и реализации?
источник

PD

Phil Delgyado in Архитектура данных
И в какую БД умеет пробрасывать? И как при этом визуализация работает, как оптимизируются всякие обогащения и агрегаты?
источник

АЖ

Артем Жданов in Архитектура данных
Phil Delgyado
Эхх.. и есть же еще такие неторопливые... Но ладно, я просто давно не встречал возможность таких редко обновляющихся дашбордов. У меня в практике отставание на сутки было недопустимым, желательно не более 15 минут
Не думаю, что стратегическое business decisions будут приниматься раз в 15 минут🙂
источник

АЖ

Артем Жданов in Архитектура данных
Phil Delgyado
А какой принцип, есть описание архитектуры и реализации?
источник

АЖ

Артем Жданов in Архитектура данных
Phil Delgyado
И в какую БД умеет пробрасывать? И как при этом визуализация работает, как оптимизируются всякие обогащения и агрегаты?
Да думаю, можно и в кликхаус через odbc пробросить 🙈
источник

PD

Phil Delgyado in Архитектура данных
Ээ, пробросить можно, но обычно при этом умирает и drill down и агрегаты и половина динамических визуализаций.
источник