VS
По сути, в dbt тоже самое, что можно сделать структурой в liquibase
Size: a a a
2021 July 14
AZ
в FlywayDB можно валидации прикрутить, но такое, лучше DBT (там и сами пайплайны пишутся)
VS
Я про это вроде в докладе упоминал, что там все грустно
AZ
оно чисто для прикладух
VS
Но потенциально да, если нужны именно пайплайны, то dbt выглядит очень круто. Если нужен просто менеджмент базы, то liquibase - лично мой выбор
VS
Чуть позже буду тестить dbt масштабно, возможно с докладом рол него выйду
VP
Т.е. dbt тоже умеет хранить и документировать create table + alter?
Я думал что это материализатор запросов с документированием того что она материализует.
Я думал что это материализатор запросов с документированием того что она материализует.
VS
Вы правильно думаете
VS
Суть абстрагирования от ддл в сторону elt
VS
Поэтому, если нужен именно менеджмент схем, ддл, конфигурирования, то пока liquibase, в dbt сходу такого не нашел и пока не ковырял его глубоко
VP
Спс за инфу, будет о чём теперь подумать )
AZ
оно версионирует (и документирует) модели, каждая может стать таблицей (или вьюшкой), может даже мелкие таблицы (лукапы, справочники) хранить в гите
AZ
с альтерами там правда такое, надо написать свою кастом материализацию
VP
Да, я понял, спс
AZ
Гитлабовское хранилище пишется DBT (на Snowflake), они свой код ведут открыто https://gitlab.com/gitlab-data/analytics/-/tree/master/transform/snowflake-dbt
dz
Всем привет.
Какие курсы по DE можете рекомендовать?
Какие курсы по DE можете рекомендовать?
AE
пора уже ответ на этот вопрос в пины внести
AE
каждый день кто-нить спрашивает
dz
окей, гляну в поиске
S
Если совсем с нуля, то вот это подойдёт, уже скидывал выше, но думаю что очень далеко уже
https://youtube.com/playlist?list=PLrCZzMib1e9rPxMIgPri9YnOpvyDAL9HD
https://youtube.com/playlist?list=PLrCZzMib1e9rPxMIgPri9YnOpvyDAL9HD