Size: a a a

2020 March 05

KL

Konstantin Lyubchenko in pro.kafka
quartz тоже вроде как поддерживает
источник

T

Tanya in pro.kafka
Окей  дякую.
источник

ЮХ

Юра Ходырев in pro.kafka
Всем привет.
Есть необходимость вычитывать данные из таблицы Oracle и складывать их в kafka.
У кого был опыт поделитесь... Книга, статья.

На что стоит обратить внимание?
Можно ли использовать для этих меропрятий коннектор в докере?
Для начала планирую сделать простой вариант без СDC, чисто DML запросами.
источник

SN

Sergey Nikolaev in pro.kafka
Ребята из Леруа похожую задачу решали, на митапе рассказывали https://www.youtube.com/watch?v=dxmj4GxKI5Q
источник

ЮХ

Юра Ходырев in pro.kafka
Сяп, пошел погружаться)
источник

NV

Nikita Vilunov in pro.kafka
Добрый день, подскажите пожалуйста, можно ли заставить кафка-брокер рекламировать одну и ту же ноду по нескольким адресам? Запускаем кафку в докере, кажется что копать нужно в сторону KAFKA_ADVERTISED_LISTENERS, но дальше чет понятия не имеем
источник

AZ

Anton Zadorozhniy in pro.kafka
Nikita Vilunov
Добрый день, подскажите пожалуйста, можно ли заставить кафка-брокер рекламировать одну и ту же ноду по нескольким адресам? Запускаем кафку в докере, кажется что копать нужно в сторону KAFKA_ADVERTISED_LISTENERS, но дальше чет понятия не имеем
в документации вроде понятно, но тут дополнительно все пояснено https://rmoff.net/2018/08/02/kafka-listeners-explained/
источник

I

IV in pro.kafka
Привет! подскажите, если если несколько независимых кластеров кафки, могут ли они использовать один зукипер?
источник

И

Игорь in pro.kafka
IV
Привет! подскажите, если если несколько независимых кластеров кафки, могут ли они использовать один зукипер?
я использую, просто нужно разные урлы в зукипере указывать. в целом не очень удобно
источник

I

IV in pro.kafka
Игорь
я использую, просто нужно разные урлы в зукипере указывать. в целом не очень удобно
а бестпрактис какой на этот счёт?
источник

И

Игорь in pro.kafka
IV
а бестпрактис какой на этот счёт?
не интересовался ) я использую разные урлы для подключения кластеров разных версий и разных по назначению
источник

I

IV in pro.kafka
ок, спасибо
источник

И

Игорь in pro.kafka
в основном это относится к девелоперским кластерам, т.к, завязывать маинтенанс или перегруз на одном кластере с другими кластерами в проде не очень хочется
источник

AZ

Anton Zadorozhniy in pro.kafka
IV
а бестпрактис какой на этот счёт?
best practice в отношении zookeeper  -  don't share!
источник

I

IV in pro.kafka
Anton Zadorozhniy
best practice в отношении zookeeper  -  don't share!
Спасибо!
источник

AS

Aleksey Smirnov in pro.kafka
Привет. Подскажите, можно ли реализовать работу с топиком кафки так, чтобы в нём отбрасывались сообщения по ключу, если в топике уже есть сообщение с таким же ключом?
источник

AS

Aleksey Smirnov in pro.kafka
Т.е. что-то вроде compactify log, только наоборот - нужны не самые новые, а самые старые записи.
источник

И

Игорь in pro.kafka
источник

И

Игорь in pro.kafka
может это?
источник

AS

Aleksey Smirnov in pro.kafka
не идемпотентность (тут понятно, читал), а именно разные сообщения, с разным payload, но одинаковым ключом.
1-е например в 10 утра, второе в 15, оставить нужно только первое.
источник