Size: a a a

2020 September 23

A

Artjom Kalita in pro.kafka
@gamussa почему голос такой тихий на стриме то ? =)
источник

I

Ivan in pro.kafka
А что там, зукипер выпилили из Кафки?
источник

I

Ivan in pro.kafka
Прямо скоро ждать?
источник

VG

Vik Gamov in pro.kafka
Artjom Kalita
@gamussa почему голос такой тихий на стриме то ? =)
Я там потом починил
источник

A

Artjom Kalita in pro.kafka
Vik Gamov
Я там потом починил
Очень заходит этот выпуск и начало там где вы обсуждали разные реактивные вещи, и парное программирование, все круто
источник

VG

Vik Gamov in pro.kafka
👍🏻
Старались
источник

A

Artjom Kalita in pro.kafka
еще такой формат будет ? :)
источник

IG

Igor Gordeev in pro.kafka
Ivan
А что там, зукипер выпилили из Кафки?
источник

I

Ivan in pro.kafka
Я в твиттере видел
источник

I

Ivan in pro.kafka
Подумал неужто прям случилось
источник

ЮН

Юлия Николаева... in pro.kafka
Ребят, а кто-то работал с axon для взаимодействия с кафкой?
источник

VG

Vik Gamov in pro.kafka
Artjom Kalita
еще такой формат будет ? :)
Да
источник

A

Artjom Kalita in pro.kafka
источник

O

Oleg in pro.kafka
Dmytro Striletskyi
В 5-20 раз разница (по-разному), в основном это где-то 30% самый большой, 30% средний, и 30% совсем маленький. Например, 7 воркеров по 10К, 7 по 3К, 7 по 180.
может такое быть что флуктуация в логике обработки сообщений?

БД тормозит, разные мощности у машин, разная логика для разных сообщений?
источник
2020 September 24

SB

S B in pro.kafka
Dmytro Striletskyi
Привет.

У меня 20 воркеров, которые делают одну и ту же работу в одних и тех же условиях, но почему-то у одних воркеров LAG большой, а у других маленький. Есть какие-то очевидные причины почему так может быть?
Сначала проверь распределение данных по партициям, хеширование несовершенно и вполне может быть, что у тебя одни партиции переполнены, в то время как другие пустуют. Если не это, то проверь байтрейт на все участвующие машины, если сетевая проблема, что случается часто, особенно на облаках, то некоторые воркеры просто физически не получают свои данные с той же скоростью, с которой их получают остальные. И только потом можно грешить на 1) виртуализацию, 2) рантайм и конфигурацию приложения и 3) железо в том порядке, в котором я озвучил. Это из моего личного опыта с такими проблемами.
источник

VG

Vik Gamov in pro.kafka
Хороший доклад, сходите посмотрите кто хочет понять как время работает в Kafka Streams https://www.confluent.io/resources/kafka-summit-2020/the-flux-capacitor-of-kafka-streams-and-ksqldb/
источник

OG

Oleg Gavrilov in pro.kafka
Здравствуйте! https://github.com/housepower/clickhouse_sinker как в работе?
источник

СК

Слава Ксенз... in pro.kafka
CH же уже сам научился забирать данные из кафки
источник

OG

Oleg Gavrilov in pro.kafka
Слава Ксенз
CH же уже сам научился забирать данные из кафки
tableengine=kafka? этож не то
источник

СК

Слава Ксенз... in pro.kafka
а в чем преимущество sinker-а?
источник