Size: a a a

2020 March 20

AE

Anton Evseev in pro.kafka
Коллеги, привет. Подскажите пожалуйста, брокеры не коннектятся в zk, ошибка «Will not attempt to authenticate using SASL (unknown error) (org.apache.zookeeper.ClientCnxn)» Как с этим бороться?
источник

MB

Mikhail Butalin in pro.kafka
Я в лёгком замешательстве...
А из 2ой кафки что kafka.consumer убрали из JMX чтоли????
источник

MB

Mikhail Butalin in pro.kafka
источник

MB

Mikhail Butalin in pro.kafka
короче, на JMX брокера нет этой метрики. Она в самом консьюмере
источник

MB

Mikhail Butalin in pro.kafka
И еще вопрос!
источник

MB

Mikhail Butalin in pro.kafka
Я тут столкнулся со странной непоняткой.
У меня  kafka-consumer-groups.sh --list ничего не выдаёт.
Это как так?
Консьюмеры есть в кафке...
источник

MB

Mikhail Butalin in pro.kafka
кафка 2.2.1
источник

MB

Mikhail Butalin in pro.kafka
Разьве партиция в топике - это консьюмер?
источник

ὦan in pro.kafka
FIY - если запускать кафку в докере (образ confluent) то при поднятии докер затирает часть настроек - по крайней мере точно затирает KAFKA_OFFSETS_TOPIC_REPLICATION_FACTOR и ставит его 3
источник

N

Nenormalniy in pro.kafka
ὦan
FIY - если запускать кафку в докере (образ confluent) то при поднятии докер затирает часть настроек - по крайней мере точно затирает KAFKA_OFFSETS_TOPIC_REPLICATION_FACTOR и ставит его 3
FYI, наверное
источник

ὦan in pro.kafka
А можно как-то c кафки больше затребовать стектрейс?
Не особо информативная ошибка Caused by: java.lang.ClassCastException: CreditProductMessage cannot be cast to su.moneycare.service.precalc.kafka.model.CreditProductMessage
Учитывая что я перетащил авро модель из проекта и она валидная
источник

МИ

Морозов Иван in pro.kafka
Посоветуйте, пожалуйста, какой-нибудь общедоступный дашборд для кафка коннекторов в графану, чтобы мониторить воркеры, коннекторы, таски
источник

r

romλn in pro.kafka
Морозов Иван
Посоветуйте, пожалуйста, какой-нибудь общедоступный дашборд для кафка коннекторов в графану, чтобы мониторить воркеры, коннекторы, таски
У конфлюэнта есть Хельм чарты со всей платформой и там из коробки прометеус и графана с дашбордами
источник

ὦan in pro.kafka
Кто-нибудь сталкивался с ошибкой Could not find class CreditProductMessage specified in writer's schema whilst finding reader's schema for a SpecificRecord
Отправляю в топик сообщение через авро и пытаюсь прочитать его в другом сервисе
Генерировал классы на основании одной и той же схеме
Вот консьюмер
Настройки https://pastebin.com/YnADEFHZ
Из ответов нашел https://github.com/confluentinc/schema-registry/issues/670
источник

ὦan in pro.kafka
Я решил - надо было сделать specific.avro.reader: false
источник
2020 March 22

IR

Ivan Rasikhin in pro.kafka
Привет всем, кто нибудь сталкивался с такими ошибками в кафке:
[2020-03-22 07:20:40,505] INFO [ReplicaFetcher replicaId=2, leaderId=0, fetcherId=0] Retrying leaderEpoch request for partition card-event-9 as the leader reported an error: UNKNOWN_SERVER_ERROR (kafka.server.ReplicaFetcherThread)
?
источник

IR

Ivan Rasikhin in pro.kafka
просто спами по разным топикам/партициям
источник

IR

Ivan Rasikhin in pro.kafka
[2020-03-22 07:14:29,206] INFO [ReplicaFetcher replicaId=2, leaderId=0, fetcherId=0] Error sending fetch request (sessionId=INVALID, epoch=INITIAL) to node 0: java.net.SocketTimeoutException: Failed to connect within 30000 ms. (org.apache.kafka.clients.FetchSessionHandler)
источник

IR

Ivan Rasikhin in pro.kafka
плюс такое
источник

Y

Yuriy in pro.kafka
Ivan Rasikhin
Привет всем, кто нибудь сталкивался с такими ошибками в кафке:
[2020-03-22 07:20:40,505] INFO [ReplicaFetcher replicaId=2, leaderId=0, fetcherId=0] Retrying leaderEpoch request for partition card-event-9 as the leader reported an error: UNKNOWN_SERVER_ERROR (kafka.server.ReplicaFetcherThread)
?
Может разные конфиги у брокеров?
источник