Size: a a a

2020 November 30

SM

Setplus Mac in pro.kafka
Добрый день. Подскажите, пожалуйста, как получить текущее значение конфигурационной переменной для брокера, когда он запущен?
источник

A

Andrey in pro.kafka
Скажите, а есть ли кто в Кассандре разбирается? Может у кассандры свой телеграм канал есть (не могу найти)
источник

S

Slava in pro.kafka
Andrey
Скажите, а есть ли кто в Кассандре разбирается? Может у кассандры свой телеграм канал есть (не могу найти)
Могу неспешно ответить на многие вопросы. Можно в личку.
источник

A

Andrey in pro.kafka
Slava
Могу неспешно ответить на многие вопросы. Можно в личку.
Спасибо, написал в личку
источник

AB

Andrey Belyakov in pro.kafka
Setplus Mac
Добрый день. Подскажите, пожалуйста, как получить текущее значение конфигурационной переменной для брокера, когда он запущен?
Если есть доступ к логам, то при старте в server.log по-умолчанию выводится конфиг
источник

SM

Setplus Mac in pro.kafka
Andrey Belyakov
Если есть доступ к логам, то при старте в server.log по-умолчанию выводится конфиг
логам:  имеются ввиду те, что написаны в /log/dirs?
источник

AB

Andrey Belyakov in pro.kafka
Setplus Mac
логам:  имеются ввиду те, что написаны в /log/dirs?
Которые по-умолчанию /kafka_{version}/logs
источник

SM

Setplus Mac in pro.kafka
Andrey Belyakov
Которые по-умолчанию /kafka_{version}/logs
Понял, спасибо.
источник

AB

Andrey Belyakov in pro.kafka
Setplus Mac
Понял, спасибо.
А про какую переменную речь? Еще есть набор консольных утилит (kafka-configs, kafka-topics, kafka-consumer-groups), через которые тоже можно узнать текущие конфиги
источник

SM

Setplus Mac in pro.kafka
Andrey Belyakov
А про какую переменную речь? Еще есть набор консольных утилит (kafka-configs, kafka-topics, kafka-consumer-groups), через которые тоже можно узнать текущие конфиги
Речь идёт о переменных auto.create.topics.enable и allow.auto.create.topics
источник

A

Andrey in pro.kafka
Setplus Mac
Речь идёт о переменных auto.create.topics.enable и allow.auto.create.topics
kafka-configs.sh --bootstrap-server 192.168.60.30:9092 --entity-type brokers --entity-name 1 --describe --all | grep auto.create.topics.enable
источник

SM

Setplus Mac in pro.kafka
Andrey
kafka-configs.sh --bootstrap-server 192.168.60.30:9092 --entity-type brokers --entity-name 1 --describe --all | grep auto.create.topics.enable
Спасибо большое!
источник

SM

Setplus Mac in pro.kafka
Переменные --entity-* не учёл
источник

A

Andrey in pro.kafka
да, по идее это только настройки брокера, там ещё можно настройки топиков и тд глянуть. Но вроде как раз дефолтные настройки они с настроек брокера берутся, поэтому должны там быть
источник

SM

Setplus Mac in pro.kafka
Andrey
да, по идее это только настройки брокера, там ещё можно настройки топиков и тд глянуть. Но вроде как раз дефолтные настройки они с настроек брокера берутся, поэтому должны там быть
+1
источник

SM

Setplus Mac in pro.kafka
Кстати, если auto.create.topics.enable=true стоит, а по allow.auto.create.topics  ничего не высвечивается, то это означает, что топики могут автоматически создаваться?
источник

SM

Setplus Mac in pro.kafka
В документации для этого параметра дефолтное значение — True.
источник

AB

Aleksey Bodrikov in pro.kafka
Коллеги, нужен совет. есть 3х нодовый кафка кластер. одна нода зукипер с id=1 (некоторое время назад и данные на нем уже не актуальные) выпал из ансамбля и теперь при попытках вернуть его обратно, я получаю сообщение: [QuorumConnectionThread-[myid=1]-2:QuorumCnxManager@513] - Have smaller server identifier, so dropping the connection: (myId:1 --> sid:3). Лид сейчас 3-я нода. Поделитесь опытом как его можно вернуть обратно, на навернув весь стек?
источник

GS

Gleb Selyukov in pro.kafka
Всем привет.
Кто-нибудь сталкивался с проблемой write tcp 10.244.3.228:50748->10.135.229.23:9092: write: broken pipe в golang клиете sarama v1.27.2 (kafka v2.3.0) с использованием SyncProducer?

Заранее большое спасибо за ответ
источник

ЮХ

Юра Ходырев... in pro.kafka
Aleksey Bodrikov
Коллеги, нужен совет. есть 3х нодовый кафка кластер. одна нода зукипер с id=1 (некоторое время назад и данные на нем уже не актуальные) выпал из ансамбля и теперь при попытках вернуть его обратно, я получаю сообщение: [QuorumConnectionThread-[myid=1]-2:QuorumCnxManager@513] - Have smaller server identifier, so dropping the connection: (myId:1 --> sid:3). Лид сейчас 3-я нода. Поделитесь опытом как его можно вернуть обратно, на навернув весь стек?
Подобная петрушка была, когда были проблемы с дисками и зукипер часто разваливал ансамбль.
Единственное решение которое я нашел, посмотреть версию Zxid на всех ZK нодах и ребутнуть зукипер на той, где не сходится этот Zxid
источник