Size: a a a

2020 August 23

Н

Николай in pro.kafka
Организовпны в кластер
источник

Н

Николай in pro.kafka
3 ip адреса
источник

Н

Николай in pro.kafka
Я предположу, что давать клиенту (продюсеру или коньсьюмеру) можно любой
источник

Н

Николай in pro.kafka
Кафка внутри отрулит сама куда что
источник

DP

Denis Pavlyuchenko in pro.kafka
лучше давать несколько адресов брокеров, чтобы если один упал - ничего не встало
источник

SP

Sergey Potekhin in pro.kafka
https://www.litres.ru/gven-shapira/apache-kafka-potokovaya-obrabotka-i-analiz-dannyh-42225434/  Отличная книга про Kafka. Там все подробно написано про то, как работает и почему
источник

OP

Oleg P in pro.kafka
Коллеги, приветствую! Кто может поделиться инструкциями как поставить монгодб коннектор для Кафки в качестве источника данных? Без использования confluence, напрямую в исходники  Кафки , с оф.сайта? И как это все потом администрировать? По винду- гиблое дело ставить?
источник

В

Вячеслав in pro.kafka
https://docs.mongodb.com/kafka-connector/master/
А вот это не катит? Вроде, достаточно подробно
источник
2020 August 24

V

Vadim in pro.kafka
как можно список топиков с группами с оффсетами вывести
источник

YA

Yerlan A in pro.kafka
День добрый, подскажите пжлста
./kafka-consumer-groups.sh --list --bootstrap-server remote_cloud_server:9092

Error: Executing consumer group command failed due to org.apache.kafka.common.KafkaException: Failed to find brokers to send ListGroups
java.util.concurrent.ExecutionException: org.apache.kafka.common.KafkaException: Failed to find brokers to send ListGroups
       at org.apache.kafka.common.internals.KafkaFutureImpl.wrapAndThrow(KafkaFutureImpl.java:45)
       at org.apache.kafka.common.internals.KafkaFutureImpl.access$000(KafkaFutureImpl.java:32)
       at org.apache.kafka.common.internals.KafkaFutureImpl$SingleWaiter.await(KafkaFutureImpl.java:89)
       at org.apache.kafka.common.internals.KafkaFutureImpl.get(KafkaFutureImpl.java:260)
       at kafka.admin.ConsumerGroupCommand$ConsumerGroupService.listConsumerGroups(ConsumerGroupCommand.scala:216)
       at kafka.admin.ConsumerGroupCommand$ConsumerGroupService.listGroups(ConsumerGroupCommand.scala:211)
       at kafka.admin.ConsumerGroupCommand$.run(ConsumerGroupCommand.scala:72)
       at kafka.admin.ConsumerGroupCommand$.main(ConsumerGroupCommand.scala:61)
       at kafka.admin.ConsumerGroupCommand.main(ConsumerGroupCommand.scala)
Caused by: org.apache.kafka.common.KafkaException: Failed to find brokers to send ListGroups
       at org.apache.kafka.clients.admin.KafkaAdminClient$25.handleFailure(KafkaAdminClient.java:3154)
       at org.apache.kafka.clients.admin.KafkaAdminClient$Call.failWithTimeout(KafkaAdminClient.java:777)
       at org.apache.kafka.clients.admin.KafkaAdminClient$Call.fail(KafkaAdminClient.java:748)
       at org.apache.kafka.clients.admin.KafkaAdminClient$TimeoutProcessor.handleTimeouts(KafkaAdminClient.java:871)
       at org.apache.kafka.clients.admin.KafkaAdminClient$AdminClientRunnable.timeoutPendingCalls(KafkaAdminClient.java:939)
       at org.apache.kafka.clients.admin.KafkaAdminClient$AdminClientRunnable.processRequests(KafkaAdminClient.java:1260)
       at org.apache.kafka.clients.admin.KafkaAdminClient$AdminClientRunnable.run(KafkaAdminClient.java:1224)
       at java.base/java.lang.Thread.run(Thread.java:834)
Caused by: org.apache.kafka.common.errors.TimeoutException: Call(callName=findAllBrokers, deadlineMs=1598264029873, tries=1, nextAllowedTryMs=1598264029974) timed out at 1598264029874 after 1 attempt(s)
Caused by: org.apache.kafka.common.errors.TimeoutException: Timed out waiting for a node assignment.
источник

YA

Yerlan A in pro.kafka
что может быть?
источник

I

Ivan in pro.kafka
у вас кафка
источник

ЮХ

Юра Ходырев... in pro.kafka
Yerlan A
что может быть?
Развалился кластер и не может синхронизироваться обратно, судя вот по этому:
Timed out waiting for a node assignment.
источник

YA

Yerlan A in pro.kafka
Там всего одна нода. Кластера как такого нету
источник

YA

Yerlan A in pro.kafka
к зукипиру запросы норм идут
./kafka-topics.sh --list --zookeeper remote_cloud_server:2181
источник

ЮХ

Юра Ходырев... in pro.kafka
а в логах зукипера ошибок нету?
источник

YA

Yerlan A in pro.kafka
такое есть
2020-08-07 11:55:20,913 - INFO  [main:NIOServerCnxnFactory@89] - binding to port 0.0.0.0/0.0.0.0:2181
2020-08-07 11:55:20,915 - ERROR [main:ZooKeeperServerMain@64] - Unexpected exception, exiting abnormally
java.net.BindException: Address already in use
       at sun.nio.ch.Net.bind0(Native Method)
       at sun.nio.ch.Net.bind(Net.java:433)
       at sun.nio.ch.Net.bind(Net.java:425)
       at sun.nio.ch.ServerSocketChannelImpl.bind(ServerSocketChannelImpl.java:223)
       at sun.nio.ch.ServerSocketAdaptor.bind(ServerSocketAdaptor.java:74)
       at sun.nio.ch.ServerSocketAdaptor.bind(ServerSocketAdaptor.java:67)
       at org.apache.zookeeper.server.NIOServerCnxnFactory.configure(NIOServerCnxnFactory.java:90)
       at org.apache.zookeeper.server.ZooKeeperServerMain.runFromConfig(ZooKeeperServerMain.java:117)
       at org.apache.zookeeper.server.ZooKeeperServerMain.initializeAndRun(ZooKeeperServerMain.java:87)
       at org.apache.zookeeper.server.ZooKeeperServerMain.main(ZooKeeperServerMain.java:53)
       at org.apache.zookeeper.server.quorum.QuorumPeerMain.initializeAndRun(QuorumPeerMain.java:116)
       at org.apache.zookeeper.server.quorum.QuorumPeerMain.main(QuorumPeerMain.java:78)
источник

В

Вячеслав in pro.kafka
> 2020-08-07 11:55:20,915 - ERROR
Ну это когда было...
источник

YA

Yerlan A in pro.kafka
ага...
источник

YA

Yerlan A in pro.kafka
непонятно че за ошибка...
источник