Size: a a a

2020 September 25

VG

Vik Gamov in pro.kafka
По чесноку нет такой конфлюентовской кафки. Есть кафка которая идет в комьюнити эдишт конфлюент платформы. Она такая же как и АК. Есть Confluent server - это уже кафка прокачанная но он идет за лицензию. Так что CP community или АК разницы нет, это как иметь сборку в rpm виде от redhat или centos
источник

I

IV in pro.kafka
Vik Gamov
По чесноку нет такой конфлюентовской кафки. Есть кафка которая идет в комьюнити эдишт конфлюент платформы. Она такая же как и АК. Есть Confluent server - это уже кафка прокачанная но он идет за лицензию. Так что CP community или АК разницы нет, это как иметь сборку в rpm виде от redhat или centos
да, я пока в общих чертах ознакомился
источник

V

Vadim in pro.kafka
А confluent server чем как прокачан
источник

lk

leonid khomenko in pro.kafka
Vadim
А confluent server чем как прокачан
Посмотри что есть в 6.0 . Self rebalance, чёткие метрики в control center
источник

lk

leonid khomenko in pro.kafka
@gamussa собственно вопрос по контрол центер. Пытаемся вынести на отдельный брокер метрики, чтоб шустрее было. Брокеры главного кластера пишут в метрик брокер, всё ок. Но контрол центер не забирает их. По документации не очень ясно, нужно метрик брокер в контрол центер через confluent.controlcenter.kafka.<name>.bootstrap.servers добавлять ?
источник

lk

leonid khomenko in pro.kafka
Как дополнительный кластер для мониторинга
источник

АК

Алексей Кочерев... in pro.kafka
Всем привет, вопрос по тестам kstreams,  пишу тест который проходит всю топологию, на вход первого топика даю json объект, внутри топологии делаю join  предварительно делаю rekey, и в финальном топике жду измененный json. Могу я при этом просто подать json на вход первого топика и ждать его в финальном?
источник

VG

Vik Gamov in pro.kafka
Алексей Кочерев
Всем привет, вопрос по тестам kstreams,  пишу тест который проходит всю топологию, на вход первого топика даю json объект, внутри топологии делаю join  предварительно делаю rekey, и в финальном топике жду измененный json. Могу я при этом просто подать json на вход первого топика и ждать его в финальном?
На чем тест? TopologyTestDrver?
источник

VG

Vik Gamov in pro.kafka
> Могу я при этом просто подать json на вход первого топика и ждать его в финальном?
В это и смысл, не?
источник

АК

Алексей Кочерев... in pro.kafka
Vik Gamov
На чем тест? TopologyTestDrver?
Да
источник

VG

Vik Gamov in pro.kafka
Тогда не вижу никаких проблем
источник

АК

Алексей Кочерев... in pro.kafka
Vik Gamov
> Могу я при этом просто подать json на вход первого топика и ждать его в финальном?
В это и смысл, не?
Угу, у меня просто по цепочке сообщение не долетает до финального топика, поэтому и решил спросить, может там есть какие то особенности
источник

VG

Vik Gamov in pro.kafka
Алексей Кочерев
Угу, у меня просто по цепочке сообщение не долетает до финального топика, поэтому и решил спросить, может там есть какие то особенности
Значит надо разбить топологию на мелкие и тестировать отдельно. Например как тут
Один тест для Movies, Один для Ratings, и один e2e https://github.com/gAmUssA/streaming-movie-ratings-min-0519/tree/master/src/test/java/io/confluent/demo
источник

АК

Алексей Кочерев... in pro.kafka
Vik Gamov
Значит надо разбить топологию на мелкие и тестировать отдельно. Например как тут
Один тест для Movies, Один для Ratings, и один e2e https://github.com/gAmUssA/streaming-movie-ratings-min-0519/tree/master/src/test/java/io/confluent/demo
Спасибо)) будем смотреть
источник

V

VladMl in pro.kafka
Алексей Кочерев
Угу, у меня просто по цепочке сообщение не долетает до финального топика, поэтому и решил спросить, может там есть какие то особенности
Idea отлично умеет дебажить стримы, если это Java
источник

АК

Алексей Кочерев... in pro.kafka
VladMl
Idea отлично умеет дебажить стримы, если это Java
Котлин) пока не разобрался, спасибо за совет
источник

VG

Vik Gamov in pro.kafka
VladMl
Idea отлично умеет дебажить стримы, если это Java
Эт как?
источник

DL

Denis Larionov in pro.kafka
Наверное точки останова имеются в виду, на каждом шаге стрима
источник

V

VladMl in pro.kafka
Ставишь бряку и дебажишь
источник

V

VladMl in pro.kafka
Denis Larionov
Наверное точки останова имеются в виду, на каждом шаге стрима
Да, я так что раз делал
источник