DU
Extract Transform Load
EL
ELT
ETL
От просто к сложному. Простого ETLне бывает 😉
EL
ELT
ETL
От просто к сложному. Простого ETLне бывает 😉
Size: a a a
2020 September 03
DS
Александр
Работа с ETL это не просто перегнать данные, надо учитывать модель данных, индексы, производительность памяти (buffer size), блокировки. Целая область знаний. Мы например не пускаем аналитиков в ETL хотят просто данные гонять пусть юзают Alteryx
Модель данных желательно знать в принципе. Нагрузку неплохо переносить на этапе распределения прав и делать это централизовано. Может понадобится работа не только с агрегами, но с сырьем. Желательно не забыть тут про data quality.
"Кого-то не пускать" - звучит как проблема, от которой хотят закрыться вместо того, чтобы пускать на определенных условиях.
no offense как говорится
"Кого-то не пускать" - звучит как проблема, от которой хотят закрыться вместо того, чтобы пускать на определенных условиях.
no offense как говорится
EL
Alexander Varlamov
Чат будет, про кружку не уверен ))
Ждем докладов ;))
DS
Olga Kolcheva
Не у всех это явно дифференцированы. Мы все делали как системные аналитики, протягивали данные в витрины и отчеты строили. Были у нас разработчики, которые все это деплоили, что-то отптимизироаали и тд, но логика трансформации данных была на анлитике
тут да 100%
это как раз история про системных аналитиков и то, что туда может входить абсолютно разный набор обязанностей
это как раз история про системных аналитиков и то, что туда может входить абсолютно разный набор обязанностей
EL
Начнём с того, что BI и DE отвечают за разные этапы обработки данных
Но очень круто когда биащик помогает инженеру ))
DS
Это история про совместную работу. Ничего не вижу плохого в слаженных действиях и взаимном понимании потребностей и возможностей.
Но это только мое скромное мнение)
Но это только мое скромное мнение)
EL
Это история про совместную работу. Ничего не вижу плохого в слаженных действиях и взаимном понимании потребностей и возможностей.
Но это только мое скромное мнение)
Но это только мое скромное мнение)
Ну в том плане - набросал в биае, с итиэл поковырялся, ну а дальше в прод согласно сдлс инженерному)
SA
Всем привет, можете подсказать как реализовать винтажный анализ в табло?
V
Всем привет, можете подсказать как реализовать винтажный анализ в табло?
Вам нужны поискать по ключевым словам cohort analysis тут или в гугле
ИА
Всем привет.
Ссылка на datasource имеет вид:
.../datasources/<id>/connections
где id - id соединения.
Этот id имеет свойство меняться при публикации источника на сервер.
Наверняка кто-то делится ссылкой на источник с коллегами или описывает с доке. Как вы боретесь с этой проблемой?
Ссылка на datasource имеет вид:
.../datasources/<id>/connections
где id - id соединения.
Этот id имеет свойство меняться при публикации источника на сервер.
Наверняка кто-то делится ссылкой на источник с коллегами или описывает с доке. Как вы боретесь с этой проблемой?
SA
Вам нужны поискать по ключевым словам cohort analysis тут или в гугле
Спасибо
EL
Илья Аникин
Всем привет.
Ссылка на datasource имеет вид:
.../datasources/<id>/connections
где id - id соединения.
Этот id имеет свойство меняться при публикации источника на сервер.
Наверняка кто-то делится ссылкой на источник с коллегами или описывает с доке. Как вы боретесь с этой проблемой?
Ссылка на datasource имеет вид:
.../datasources/<id>/connections
где id - id соединения.
Этот id имеет свойство меняться при публикации источника на сервер.
Наверняка кто-то делится ссылкой на источник с коллегами или описывает с доке. Как вы боретесь с этой проблемой?
Был тут холивар небольшой)
EL
Илья Аникин
Всем привет.
Ссылка на datasource имеет вид:
.../datasources/<id>/connections
где id - id соединения.
Этот id имеет свойство меняться при публикации источника на сервер.
Наверняка кто-то делится ссылкой на источник с коллегами или описывает с доке. Как вы боретесь с этой проблемой?
Ссылка на datasource имеет вид:
.../datasources/<id>/connections
где id - id соединения.
Этот id имеет свойство меняться при публикации источника на сервер.
Наверняка кто-то делится ссылкой на источник с коллегами или описывает с доке. Как вы боретесь с этой проблемой?
Решения нет на сколько я понял
EL
Илья Аникин
Всем привет.
Ссылка на datasource имеет вид:
.../datasources/<id>/connections
где id - id соединения.
Этот id имеет свойство меняться при публикации источника на сервер.
Наверняка кто-то делится ссылкой на источник с коллегами или описывает с доке. Как вы боретесь с этой проблемой?
Ссылка на datasource имеет вид:
.../datasources/<id>/connections
где id - id соединения.
Этот id имеет свойство меняться при публикации источника на сервер.
Наверняка кто-то делится ссылкой на источник с коллегами или описывает с доке. Как вы боретесь с этой проблемой?
Генерить заново ссылку
ИА
какая боль
EL
Илья Аникин
какая боль
Olga просила писать ей юз кейсы)
ВБ
Илья Аникин
Всем привет.
Ссылка на datasource имеет вид:
.../datasources/<id>/connections
где id - id соединения.
Этот id имеет свойство меняться при публикации источника на сервер.
Наверняка кто-то делится ссылкой на источник с коллегами или описывает с доке. Как вы боретесь с этой проблемой?
Ссылка на datasource имеет вид:
.../datasources/<id>/connections
где id - id соединения.
Этот id имеет свойство меняться при публикации источника на сервер.
Наверняка кто-то делится ссылкой на источник с коллегами или описывает с доке. Как вы боретесь с этой проблемой?
Недавно обсуждали, предлагали под каждый источник делать проект))
ИА
Недавно обсуждали, предлагали под каждый источник делать проект))
ахаха
EL
Недавно обсуждали, предлагали под каждый источник делать проект))
Ну или субпроект))
EL
Илья Аникин
Всем привет.
Ссылка на datasource имеет вид:
.../datasources/<id>/connections
где id - id соединения.
Этот id имеет свойство меняться при публикации источника на сервер.
Наверняка кто-то делится ссылкой на источник с коллегами или описывает с доке. Как вы боретесь с этой проблемой?
Ссылка на datasource имеет вид:
.../datasources/<id>/connections
где id - id соединения.
Этот id имеет свойство меняться при публикации источника на сервер.
Наверняка кто-то делится ссылкой на источник с коллегами или описывает с доке. Как вы боретесь с этой проблемой?
А вы зачем эту ссылку используете?