Size: a a a

Архитектура данных

2020 February 03

e

er@essbase.ru in Архитектура данных
Vladislav 👻 Shishkov
Не используют анхор на хранилище, слишком много джойнов, уже года 2-3 используют гибрид анхора с датаволт
А можно чутбь подробнее ? (если возможно )
* мне нужно спроектировать хранилище, и хочу попробовать что нибудь новенькое
источник

VS

Vladislav 👻 Shishkov in Архитектура данных
Читайте и пробуйте
источник

e

er@essbase.ru in Архитектура данных
Vladislav 👻 Shishkov
Читайте и пробуйте
Да, я с этого и начал .  Есть какие нибудь публикации что сечайс реально работает . (не хочется тратить время на академическое чтение  и проверку космических идей)
источник

VS

Vladislav 👻 Shishkov in Архитектура данных
Есть гугл, доклады авито и Николая Голова
источник

K

Kirill M in Архитектура данных
Rustem Mannanov
Спросите господина Голова в чате вертики, всем наверное будет интересно)
Может и по терадате есть чат?
Знает кто?
Или ещё не изобрели такого
источник

RM

Rustem Mannanov in Архитектура данных
Kirill M
Может и по терадате есть чат?
Знает кто?
Или ещё не изобрели такого
Не наблюдал, публичного вроде как нет.
источник

RM

Rustem Mannanov in Архитектура данных
er@essbase.ru
Да, я с этого и начал .  Есть какие нибудь публикации что сечайс реально работает . (не хочется тратить время на академическое чтение  и проверку космических идей)
Из наблюдений - те хранилища (двх) которые можно назвать рабочими и универсальными (покрывающие много предметных областей) - как правило гибриды из идей инмона, анкора, дв и костылей/гениальности авторов. Так что анализ + синтез - ваш путь)
источник

PG

Paul Golubev in Архитектура данных
А можете кто-то навскидку написать, какие недостатки у DV? Просто судя по всему, сам подход достаточно гибок в плане проектирования
источник

K

Kirill M in Архитектура данных
Анкор кроме Авито нигде не видел.
Причем когда был у них на собеседовании, они не смогли ответить, почему у них анкор и почему некоторые детали его реализации сделаны так, как сделаны
источник

K

Kirill M in Архитектура данных
Так как и Авито и анкор из Швеции, то я решил, что это и есть основная причина
источник

VS

Vladislav 👻 Shishkov in Архитектура данных
ну вообще-то там гораздо больше тонкостей и плюсов, нежели "Швеция"
источник

K

Kirill M in Архитектура данных
Не исключаю. Но узнать об этом не удалось
источник

RK

Roman Kolchin in Архитектура данных
Kirill M
Так как и Авито и анкор из Швеции, то я решил, что это и есть основная причина
Еще Анкор позволил сэкономить на лицензиях вертики, т.к. полная нормализация это самый компактный способ представления данных.
источник

PG

Paul Golubev in Архитектура данных
Ну ещё в статье была освещена проблема большого потока данных, в dv не успевало вставляться
источник

RK

Roman Kolchin in Архитектура данных
Paul Golubev
Ну ещё в статье была освещена проблема большого потока данных, в dv не успевало вставляться
Не очень правдоподобно, на мой взгляд — хватает производительности на нормализацию, но не хватает на инсерт?
источник

VS

Vladislav 👻 Shishkov in Архитектура данных
Roman Kolchin
Еще Анкор позволил сэкономить на лицензиях вертики, т.к. полная нормализация это самый компактный способ представления данных.
вообще-то, анхор и датаволт подразумевают как раз избыточность...
источник

VS

Vladislav 👻 Shishkov in Архитектура данных
как минимум из-за того, что связь M:M не рекомендуется и делают две связи 1:M и M:1 для бизнес логики
источник

VS

Vladislav 👻 Shishkov in Архитектура данных
Paul Golubev
Ну ещё в статье была освещена проблема большого потока данных, в dv не успевало вставляться
эта проблема не относится к колоночным бд
источник

VS

Vladislav 👻 Shishkov in Архитектура данных
именно поэтому на вертике строят через анхор+датаволт
источник

PG

Paul Golubev in Архитектура данных
Я перечитал статью. Там были перечислены недостатки dv1, и эксперимент со вставкой немного натянутый
источник