Size: a a a

2020 October 06

SB

Sergei Beilin in pro.kafka
Topic: ExampleTopicMultiPartition       Partition: 0    Leader: 2       Replicas: 2,1   Isr: 2,1
- у партиции №0 лидер - второй брокер
источник

SB

S B in pro.kafka
Michael Akushsky
не могу нагуглить, как это узнается?
kafka-topics <parameters> —describe
источник

SB

S B in pro.kafka
Примерно так.
источник

MA

Michael Akushsky in pro.kafka
Sergei Beilin
Topic: ExampleTopicMultiPartition       Partition: 0    Leader: 2       Replicas: 2,1   Isr: 2,1
- у партиции №0 лидер - второй брокер
ага ,понял
источник

SB

S B in pro.kafka
Вместе с Кафкой идут скрипты, которые надо вызвать с аргументами выше.
источник

MA

Michael Akushsky in pro.kafka
то есть, надо тестить запись в первый и чтение из второго
источник

MA

Michael Akushsky in pro.kafka
ну ка
источник

MA

Michael Akushsky in pro.kafka
S B
Вместе с Кафкой идут скрипты, которые надо вызвать с аргументами выше.
да, осознал, спасибо, я же выше кинул результат, а там ужк всё есть
источник

MA

Michael Akushsky in pro.kafka
да, всё работает
источник

SB

S B in pro.kafka
Michael Akushsky
да, осознал, спасибо, я же выше кинул результат, а там ужк всё есть
Если на Кафку хочешь плотно сесть, то имеет смысл уделить время cli. Полезное очень.
источник

VG

Vik Gamov in pro.kafka
Переслано от Vik Gamov
https://youtu.be/cAwAOcIpcGk стрим через 2 часа! Будет Клауд Кафка, Коннект, ksqldb, reactor и вебсокеты через sprongboot webflux
источник

ON

Oleg Nyrkov in pro.kafka
Всем доброго. производительность кафки на высшем уровне, но не всегда нужно, нет параметра который может ограничить консьюмер, чтобы он мог забрать не больше N сообщений в минуту
источник

Y

Yuriy in pro.kafka
Oleg Nyrkov
Всем доброго. производительность кафки на высшем уровне, но не всегда нужно, нет параметра который может ограничить консьюмер, чтобы он мог забрать не больше N сообщений в минуту
источник

ON

Oleg Nyrkov in pro.kafka
Да оно, только работает не пойми как
источник

ON

Oleg Nyrkov in pro.kafka
Спасибо большое понятно куда копать
источник
2020 October 07

N

Nikolay in pro.kafka
Подскажите .есть кластер из 4 брокеров. По факту они в 2 DC, но в конфигурации это никак не отражено.  Min.insync.replicas = 2. Можно ли сделать так , что вот вторая реплика для лидера была всегда в противоположном дата центре ?
источник

ЮХ

Юра Ходырев... in pro.kafka
Nikolay
Подскажите .есть кластер из 4 брокеров. По факту они в 2 DC, но в конфигурации это никак не отражено.  Min.insync.replicas = 2. Можно ли сделать так , что вот вторая реплика для лидера была всегда в противоположном дата центре ?
https://docs.confluent.io/current/multi-dc-deployments/index.html
Не рекомендуется так делать
источник

N

Nikolay in pro.kafka
Спасибо. Это выглядит как то через чур сложным решением для такой простой задачи. Почему просто нельзя настроить ,что одна реплики должны быть в другом dc
источник

ЮХ

Юра Ходырев... in pro.kafka
Время при котором приходит подтверждение, что оффсет успешно записан, большое из-за этого производительность всего кластера сильно пострадает... Поэтому и не рекомендуется. Можно с таймаутами поиграть и получить даже рабочее решение, но гарантий никах, что оно будет работать хорошо
источник

N

Nikolay in pro.kafka
Но вот у нас по факту в 2 dc . Т.е Кафка же сейчас не выбирает реплики на основании времени подтверждения. Она реплики для isr выбирает по какому то простому алгоритму. Какому кстати ?
источник