SO
А кластер большой?)
табло или GP?
Size: a a a
2021 March 24
NN
табло или GP?
Табло
VS
А это как?
Как как, у табло в беке постгрес и редис для кеша
SO
Табло
3 машины, SSD, 1 TB
NN
Как как, у табло в беке постгрес и редис для кеша
Ну, окей, переформулирую - как себя чувствует постгрес и редис для кеша с большими данными?
АЖ
Ребят, а расскажите про ограничения в Tableu про объемы данных?
Представим себе, есть Greenplum, в нем много-много строк (пара миллиардов, например, на 3-5 колонок)
Как себя tableu чувствует с большими данными?
Очень размыто, конечно, спросил, но оч надеюсь, что понятно)))
Представим себе, есть Greenplum, в нем много-много строк (пара миллиардов, например, на 3-5 колонок)
Как себя tableu чувствует с большими данными?
Очень размыто, конечно, спросил, но оч надеюсь, что понятно)))
ты хочешь таблицу в таблошечкук выгружать? о_О
SO
Ребят, а расскажите про ограничения в Tableu про объемы данных?
Представим себе, есть Greenplum, в нем много-много строк (пара миллиардов, например, на 3-5 колонок)
Как себя tableu чувствует с большими данными?
Очень размыто, конечно, спросил, но оч надеюсь, что понятно)))
Представим себе, есть Greenplum, в нем много-много строк (пара миллиардов, например, на 3-5 колонок)
Как себя tableu чувствует с большими данными?
Очень размыто, конечно, спросил, но оч надеюсь, что понятно)))
Добавлю контекста:
У нас есть часть визуализации данных в табло, а часть данных мы отдаем по API написанному
И вот эта вторая часть с API появилась потому (тут туман войны) что якобы табло не переваривает такие объемы
А моя идея в том, что зачем нам делать API, если в табло есть уже возможности выгрузок
У нас есть часть визуализации данных в табло, а часть данных мы отдаем по API написанному
И вот эта вторая часть с API появилась потому (тут туман войны) что якобы табло не переваривает такие объемы
А моя идея в том, что зачем нам делать API, если в табло есть уже возможности выгрузок
АЖ
наши аналитики тоже так хотят, конечно, “потому что дримиво долго запрос выполняет"
АЖ
а там кросс-джоин терабайт на терабайт
VS
ты хочешь таблицу в таблошечкук выгружать? о_О
Да, есть такая категория людей, которая на табло пытаются переложить rolap
SO
ну так вот выгрузка вообще без джойнов, просто сплошняком выгрузка с фильтрацией по ключу
АЖ
ну так вот выгрузка вообще без джойнов, просто сплошняком выгрузка с фильтрацией по ключу
ну ты посчитай, сколько такой запрос в несжатом виде будет весить на выходе
VS
Добавлю контекста:
У нас есть часть визуализации данных в табло, а часть данных мы отдаем по API написанному
И вот эта вторая часть с API появилась потому (тут туман войны) что якобы табло не переваривает такие объемы
А моя идея в том, что зачем нам делать API, если в табло есть уже возможности выгрузок
У нас есть часть визуализации данных в табло, а часть данных мы отдаем по API написанному
И вот эта вторая часть с API появилась потому (тут туман войны) что якобы табло не переваривает такие объемы
А моя идея в том, что зачем нам делать API, если в табло есть уже возможности выгрузок
Хреновая идея
SO
Хреновая идея
Почему?
VS
Потому что: вендорлок, скорость говно на уровне экстрактов, скорость говно на уровне запросов
SO
ну ты посчитай, сколько такой запрос в несжатом виде будет весить на выходе
ты имеешь ввиду размер исходящего файла?
SO
Потому что: вендорлок, скорость говно на уровне экстрактов, скорость говно на уровне запросов
Представим себе, что вендорлок уже прошедшее событие, на которое повлиять никак нельзя
АЖ
ты имеешь ввиду размер исходящего файла?
угу
и станет поноятно, сколько ему ресурсов надо будет, чтоб экстракт сложить
и станет поноятно, сколько ему ресурсов надо будет, чтоб экстракт сложить
VS
Представим себе, что вендорлок уже прошедшее событие, на которое повлиять никак нельзя
Вы понимаете, что архитектурно делаете ненужную прослойку ввиде табло?
АЖ
лучше уж лайв-конект