DD
может расскажешь какой сценарий применения подхода с генерацией ID брокером?
Size: a a a
2020 April 17
I
может расскажешь какой сценарий применения подхода с генерацией ID брокером?
вообще необходимо присваивать каждому сообщению конкретный идентификатор, вопрос как это можно сделать
VS
привет! подскажите, кафка может при получении сообщения от продюсера отдавать в ответ какое то уникальное айди данного сообщения?
пульсар так делает по дефолту
I
пульсар так делает по дефолту
Пульсар это? 😁
VS
apache pulsar :)
VG
пульсар так делает по дефолту
объяснитесь, коллега
VS
продьюсеру возвращается уникальный MessageId после паблиша http://pulsar.apache.org/api/client/org/apache/pulsar/client/api/MessageId.html
KA
после send-а продьсер же может вернуть мету в колбэке. там есть offset. зачем еще какой-то доп id не оч понятно
VG
пока рассматриваем возможность со стороны кафки, если есть то будет проще всего
Смотри, комбинация Topic-partition-offset (можно вытащить из из Record Metadata после send) дают тебе уникальный идентификатор.
Если топик удалить и пересоздать но этот идентификатор не будет уникальным.
Если топик удалить и пересоздать но этот идентификатор не будет уникальным.
2020 April 18
VO
Опыт есть, но думаю в канале @clickhouse_ru многие используют Kafka.
R
Опыт есть, но думаю в канале @clickhouse_ru многие используют Kafka.
Хотелось бы узнать про шаги по добавлению новых столбцов в таблицу engine=Kafka, в доке кликауса про это информации нет к сожалению