Size: a a a

2019 December 16

VG

Vik Gamov in pro.kafka
Anatoly Soldatov
Там должен быть живой тренер или просто Лабы решать надо?
В личу написал
источник

A

Anatoly Soldatov in pro.kafka
Vik Gamov
В личу написал
источник

AU

Aleksey Uzhva in pro.kafka
Друзья, а скажите что происходит если в процессе работы консьюмера или продюсера падает брокер нода, либо наоборот вводится в строй новая нода.

Вызовет ли это оповещение клиента с последующим реьалансом?

Если да, то это пройдёт невидимо для приложения (только латенси скакнёт) или надо что-то делать ручками?
источник

GG

George Gaál in pro.kafka
Aleksey Uzhva
Друзья, а скажите что происходит если в процессе работы консьюмера или продюсера падает брокер нода, либо наоборот вводится в строй новая нода.

Вызовет ли это оповещение клиента с последующим реьалансом?

Если да, то это пройдёт невидимо для приложения (только латенси скакнёт) или надо что-то делать ручками?
Летенси - да. Ручками ничего, если упала именно одна нода и реплик достаточно
источник

GG

George Gaál in pro.kafka
Касательно брокера - мы говорим про лидера топика/партиции или любого ?
источник

AU

Aleksey Uzhva in pro.kafka
Оба случая. Но считаем что оставшихся реплик достаточно и там есть чистый лидер.
источник

AU

Aleksey Uzhva in pro.kafka
Вопрос больше про то что клиенту придёт о том уведомление и он перебросит запросы куда надо?
источник

GG

George Gaál in pro.kafka
Aleksey Uzhva
Вопрос больше про то что клиенту придёт о том уведомление и он перебросит запросы куда надо?
Если лидер упал - да
источник

AU

Aleksey Uzhva in pro.kafka
Супер, спасибо
источник

AU

Aleksey Uzhva in pro.kafka
А как вы экспоузите внутри-облачную кафку наружу? NodePort? LoadBalancer?
источник

GG

George Gaál in pro.kafka
Сразу говорю - это мое частное мнение, основанное на опыте + измышлениях
источник

GG

George Gaál in pro.kafka
Aleksey Uzhva
А как вы экспоузите внутри-облачную кафку наружу? NodePort? LoadBalancer?
А зачем Кафка в облаке, если в любом облаке есть своя очередь ? ☺️
источник

AU

Aleksey Uzhva in pro.kafka
On-Premises облако (секьюрити ибо), там стрим процессинг, но есть легаси продьюсеры, которые генерируют входной траффик.
источник

VG

Vik Gamov in pro.kafka
Aleksey Uzhva
А как вы экспоузите внутри-облачную кафку наружу? NodePort? LoadBalancer?
Load balancer
источник

AU

Aleksey Uzhva in pro.kafka
По одному на ноду или один на всех? Трафика много (сотни мбит до гигабита на кластер)
источник

GG

George Gaál in pro.kafka
Aleksey Uzhva
On-Premises облако (секьюрити ибо), там стрим процессинг, но есть легаси продьюсеры, которые генерируют входной траффик.
Т.е. из описания - продюсеры вне кластера, так?
источник

AU

Aleksey Uzhva in pro.kafka
George Gaál
Т.е. из описания - продюсеры вне кластера, так?
Да.
источник

VG

Vik Gamov in pro.kafka
Aleksey Uzhva
По одному на ноду или один на всех? Трафика много (сотни мбит до гигабита на кластер)
На ноду. А продьюсеру вне к8s кластера?
источник

GG

George Gaál in pro.kafka
Vik Gamov
На ноду. А продьюсеру вне к8s кластера?
А что там в тебя в advertised listeners ?
источник

GG

George Gaál in pro.kafka
Т.е. ты Кафка каким-то особым образом настраивал для этого конфига ?
источник