Size: a a a

2019 March 12

EL

Egor Larin in Чат Tableau
Sandra A
#вопрос Добрый день! Сталкивался ди кто-то с созданием и обновлением больших экстрактов на Tabelau Server? Пример - 300М строк с 10 столбцами. Сколько по опыту булет создаваться такой экстракт и как каких мощностях? И интересует как потом это воркбук с этим чудом открыть на Десктопе. Для создания пустого экстракта и запуска его обновления на Сервере я видела такую ссылку: https://www.tableau.com/about/blog/2013/9/easy-empty-local-extracts-25152
а зачем вам эктсракт?
источник

EL

Egor Larin in Чат Tableau
Sandra A
#вопрос Добрый день! Сталкивался ди кто-то с созданием и обновлением больших экстрактов на Tabelau Server? Пример - 300М строк с 10 столбцами. Сколько по опыту булет создаваться такой экстракт и как каких мощностях? И интересует как потом это воркбук с этим чудом открыть на Десктопе. Для создания пустого экстракта и запуска его обновления на Сервере я видела такую ссылку: https://www.tableau.com/about/blog/2013/9/easy-empty-local-extracts-25152
нормально откроется - в память загрузиться только то что на визуализации. Если вы хотите открывать таблицу эту целиком на дашборде (все 10 колонок на визуализации) - то наверное вам Табло не поможет...
источник

АП

Артем Прытков... in Чат Tableau
Sandra A
#вопрос Добрый день! Сталкивался ди кто-то с созданием и обновлением больших экстрактов на Tabelau Server? Пример - 300М строк с 10 столбцами. Сколько по опыту булет создаваться такой экстракт и как каких мощностях? И интересует как потом это воркбук с этим чудом открыть на Десктопе. Для создания пустого экстракта и запуска его обновления на Сервере я видела такую ссылку: https://www.tableau.com/about/blog/2013/9/easy-empty-local-extracts-25152
У коллеги на работы есть отчет с экстрактом на 350 млн. строк. Из оракла около 6 часов выгружался насколько я помню.  Экстракт около 3 гигов весит. Не очень быстро, но работал.
источник

EL

Egor Larin in Чат Tableau
Артем Прытков
У коллеги на работы есть отчет с экстрактом на 350 млн. строк. Из оракла около 6 часов выгружался насколько я помню.  Экстракт около 3 гигов весит. Не очень быстро, но работал.
и по таймауту не вышибало?))
источник

АП

Артем Прытков... in Чат Tableau
на сервере вышибало конечно
источник

АП

Артем Прытков... in Чат Tableau
с настройками по умолчанию
источник

EL

Egor Larin in Чат Tableau
дык а сама БД?
источник

АП

Артем Прытков... in Чат Tableau
БД коннект держала
источник

EL

Egor Larin in Чат Tableau
ишь
источник

SA

Sandra A in Чат Tableau
Egor Larin
а зачем вам эктсракт?
Live connection будет работать оооочень медленно (по уже текущему опыту). Данные нужно обновлять каждый день - сейчас намного менее объемные экстракты для воркбуков обновляются на Tableau Server по расписанию. Все лежит в Spark SQL. Все строки выводить никто не будет, это уже в принципе аггрегированные данные, нужно добавить пару калькуляций и визуализировать
источник

EL

Egor Larin in Чат Tableau
источник

EL

Egor Larin in Чат Tableau
Sandra A
Live connection будет работать оооочень медленно (по уже текущему опыту). Данные нужно обновлять каждый день - сейчас намного менее объемные экстракты для воркбуков обновляются на Tableau Server по расписанию. Все лежит в Spark SQL. Все строки выводить никто не будет, это уже в принципе аггрегированные данные, нужно добавить пару калькуляций и визуализировать
я бы посмотрел в стороно Incremental Refresh
источник

EL

Egor Larin in Чат Tableau
а так будет зависиеть на чем и как будете делать эктсракт
источник

EL

Egor Larin in Чат Tableau
и еще - исопльзовал все возможноые способы по опимизации его создания
источник

EL

Egor Larin in Чат Tableau
напрмиер, после созжания отчета -  hide all unused culumns & aggregate data to visible dimensions
источник

EL

Egor Larin in Чат Tableau
источник

EL

Egor Larin in Чат Tableau
и Live наверное можено было бы ускорить
источник

EL

Egor Larin in Чат Tableau
грамотными запросами, партицировнаием и тд
источник

АП

Артем Прытков... in Чат Tableau
ну это надо смотреть что за запрос там. Но в целом да, для табло 300-500 млн. строк - это верхняя планка. Дальше уже надо из БД данные брать.
источник

EL

Egor Larin in Чат Tableau
ну как сказать
источник