Size: a a a

2021 October 13

ПФ

Паша Финкельштейн... in Data Engineers
А вот оно может и появится, посмотрим
источник

ПФ

Паша Финкельштейн... in Data Engineers
Бреслав ушёл и убеждённость в том, что Патмат нужен растёт
источник

GP

Grigory Pomadchin in Data Engineers
а почему его не было? даже в петоне патматч уже будет (есть)
источник

ПФ

Паша Финкельштейн... in Data Engineers
Бреслав считал что оно надо только писателям компиляторов
источник

N

Nata in Data Engineers
Люди добрые, есть оч странный вопрос. Может кто-нибудь пробовал, Confluent Schema Registry нормально ли интегрируется с apache kafka?
источник

В

Вячеслав in Data Engineers
Действительно странный. А с чем ещё ему интегрироваться?
источник

В

Вячеслав in Data Engineers
Впрочем, а что вообще под интеграцией подразумевается? Это больше от клиентов (продюсеров и консюмеров) зависит.
источник

AE

Alexey Evdokimov in Data Engineers
давненько срачей про скалу не было %)

но вот чё мне действительно антересно, так это когда в EMR 3.2 завезут. опять поди хрен знает сколько ждать придётся
источник

N

Nata in Data Engineers
с конфлюент кафкой )
источник

В

Вячеслав in Data Engineers
Да одна фигня для регистри. Сама кафка с ним не общается, только продюсеры и консюмеры, а им пофигу что там - конфлюэнт или ваниль.
источник

N

Nata in Data Engineers
а, ну ок, спасибо
источник

РБ

Руслан Бикмаев... in Data Engineers
Негров нельзя ругать
источник

AZ

Anton Zadorozhniy in Data Engineers
почему не общается? конфлюент кафка общается https://docs.confluent.io/platform/current/schema-registry/schema-validation.html
источник

В

Вячеслав in Data Engineers
А, там прям валидацию на уровне брокеров можно прикрутить. Не знал.
Ну это, конечно, в ванильке работать не будет.
источник

AZ

Anton Zadorozhniy in Data Engineers
да, они в ванильку добавили только расширение протокола продюсера чтобы реджектить плохие записи, а все остальное осталось в конфлюенте
источник

K

KrivdaTheTriewe in Data Engineers
а что за апи такое
источник

K

KrivdaTheTriewe in Data Engineers
как оно на топик вешается
источник

AZ

Anton Zadorozhniy in Data Engineers
просто проперти в метаданных топика
источник

AZ

Anton Zadorozhniy in Data Engineers
источник

K

KrivdaTheTriewe in Data Engineers
непонятно, если я хочу реализовать свою кастомную логику проверки каждой записи, это возможно?
источник