Size: a a a

2021 May 19

T

T in Data Engineers
Мне в айсберге понравилось как реализован механиз эволюционирования схемы, и то что можно партиции перестраивать
источник

AZ

Anton Zadorozhniy in Data Engineers
там "заделы" есть на много важных и хороших фич, просто проект пока в самом начале пути
источник

D

Dmitry in Data Engineers
а это у  iceberg метаданные в отдельной базе хранились ? а то смотрю сейчас там в доке вроде про json речь
источник

AZ

Anton Zadorozhniy in Data Engineers
может хранить в файлах (нужна будет система со строгой целостностью чтобы атомарные операции замены проводить) либо в базе, зависит от реализации каталога
источник

AE

Alexey Evdokimov in Data Engineers
а никто часом не в курсе, каким образом засунуть всю конфигурацию дженкинса в гит?
чтобы и самого его, и джобов всех
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
говорят, там есть плагин
источник

AE

Alexey Evdokimov in Data Engineers
а какой именно, их там чёрт ногу сломит сколько
источник

AE

Alexey Evdokimov in Data Engineers
чёт не могу найти ничего подходящего :/
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
и т.д.
источник

AE

Alexey Evdokimov in Data Engineers
ну и хуета
источник

ПФ

Паша Финкельштейн... in Data Engineers
Кажется это просто неправильный подход, нет?
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
так то да, поэтому я разочаровался в jenkins
источник

AE

Alexey Evdokimov in Data Engineers
в тимсити просто говоришь "вот тебе vcs root, сложи туда всю свою конфигу"
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
знаешь правильный?
источник

ПФ

Паша Финкельштейн... in Data Engineers
Джобы должны храниться в дженкинсфайл конкретных проектов, а вот конфиг самого Дженкинса просто инкрементально бэкапить стандартными средствами
источник

VS

Vladislav 👻 Shishkov... in Data Engineers
на мой взгляд, на рынке, мне ни один инструмент не нравится, то у одних одно Г, у других другое Г, приходиться маневрировать, либо класть болт и сидеть на корп-стеке
источник

AE

Alexey Evdokimov in Data Engineers
в дженкинсе типа официальный подход смигрировать всё на pipeline, и его уже складывать в scm. но мне нахрен не сдались pipelines, мне просто набор билдов нужен...
источник

ПФ

Паша Финкельштейн... in Data Engineers
Да, я больше всего люблю Дженкинс, но и он не идеален
источник

ПФ

Паша Финкельштейн... in Data Engineers
Ну вот, это jenkinsfile же, который живёт в проекте?
источник