Е
я предлагала использовать экстракты и обновлять их раз сутки, например, ночью
Size: a a a
2020 February 17
АП
Елена
То есть в принципе невозможно?
можно, но надо очень хорошо думать над моделью данных, оптимизировать запросы, строить индексы и партиционирование и т.д. При прочих равных экстракты гораздо проще
EL
Елена
Мне поставили задачу не использовать экстракты.
Ну давай те тюнить ;)
EL
можно, но надо очень хорошо думать над моделью данных, оптимизировать запросы, строить индексы и партиционирование и т.д. При прочих равных экстракты гораздо проще
Да мне каж там ис вычислениями что то надо сделать
EL
можно, но надо очень хорошо думать над моделью данных, оптимизировать запросы, строить индексы и партиционирование и т.д. При прочих равных экстракты гораздо проще
Без просмотра запросов, дизайна борда и видов вычислений- все это вокруг да около
EL
Елена
То есть в принципе невозможно?
Все возможно
У нас были лайвы на 50м+ и ниче загрузкам была до 10 сек
Но там почти все было опущено в бд
У нас были лайвы на 50м+ и ниче загрузкам была до 10 сек
Но там почти все было опущено в бд
Е
да, к сожалению, у меня опыта особо нет. сейчас запущу Performance recording
EL
Елена
Добрый день! Подскажите, пожалуйста, решение - у меня есть база даннных в Postgresql, в которой самая большая таблица имеет порядка 32 млн записей, каждый день происходит примерно 1млн транзакций и необходимо построить несколько дашбордов в Tableau по 8-9 воркшитов с около 30 фильтрами. Экстракты использовать нельзя, версия только десктопная. Сейчас каждый дашборд грузится примерно 20 мин, тоже само происходит после применения любого из фильтров. Что посоветуете сделать?
А это материализованная таблица и лайв вьюшка в бд?)
Е
материализованная таблица
Е
вьюшки ничего не дали
EL
Елена
вьюшки ничего не дали
Конечно
EL
Воу, а можно txt файлик?) что чат не забивать, , пожалуйста,
Е
сорри сейчас
Е
Воу, а можно txt файлик?) что чат не забивать, , пожалуйста,
EL
Е
Ну я думаю все скушалось left join-ами
да
EL
Точно ли там не происходит join explosion?)
EL
Елена
Добрый день! Подскажите, пожалуйста, решение - у меня есть база даннных в Postgresql, в которой самая большая таблица имеет порядка 32 млн записей, каждый день происходит примерно 1млн транзакций и необходимо построить несколько дашбордов в Tableau по 8-9 воркшитов с около 30 фильтрами. Экстракты использовать нельзя, версия только десктопная. Сейчас каждый дашборд грузится примерно 20 мин, тоже само происходит после применения любого из фильтров. Что посоветуете сделать?
Вот в таблице в которой 32 млн - после джойнов сколько вы ожидаете строк?
Сделайте новый воркшит и бросьте в column - number of records. Какую сумму выдаст? Только фильтры снимите
Сделайте новый воркшит и бросьте в column - number of records. Какую сумму выдаст? Только фильтры снимите
Е
Вот в таблице в которой 32 млн - после джойнов сколько вы ожидаете строк?
Сделайте новый воркшит и бросьте в column - number of records. Какую сумму выдаст? Только фильтры снимите
Сделайте новый воркшит и бросьте в column - number of records. Какую сумму выдаст? Только фильтры снимите
я оставила только месяц и год в фильтрах - они есть всегда и во всех вычислениях, получилось 63млн
EL
Елена
я оставила только месяц и год в фильтрах - они есть всегда и во всех вычислениях, получилось 63млн
То есть у вас на входе 32 м за все года и месяца а теперь по одному месяцу уже 63 м?