Size: a a a

2020 January 24

SB

Sergei Beilin in pro.kafka
Vik Gamov
Я рассказал что куб из коробки плохо преспособлен для большой системы как Кафка. Я вам рассказал, что нужны скилы Кафка Мэна и куб Мэна чтобы все это запускать.
А вот у меня вопрос - вам шашечки или ехать? Вам Кафка в кубе под интерес или вы задачи бизнеса решаете? По граблям мы прошлись, запилил продукт который решает задачу 1) деплоя (для многих на этом месте все заканчивается) 2) поддержки в рабочем состоянии (апгрейды, настройка доступа).
А запись то будет?
источник
2020 January 27

A

Anatoly Soldatov in pro.kafka
Не могу в таком формате оценить, сорри :) поверю тебе на слово тогда)
источник

AZ

Anton Zadorozhniy in pro.kafka
Anatoly Soldatov
Не могу в таком формате оценить, сорри :) поверю тебе на слово тогда)
Да в России как раз особенно; я когда руководил командой в России у нас проблемы большой страны были в полный рост, мы специально хостились в Екате, и было странно гонять пользовательский трафик из северозапада на Урал чтобы потом аналитику назад отгрузить
источник
2020 January 28

ЛЗ

Лаврентий Закарян in pro.kafka
Всем привет! Кто-то знает, почему kafka назвали именно так? что означает название?
источник

NR

Nikita Ryanov in pro.kafka
People often ask how Kafka got its name and if it has anything to do with the applica‐
tion itself. Jay Kreps offered the following insight:
I thought that since Kafka was a system optimized for writing, using a writer’s name
would make sense. I had taken a lot of lit classes in college and liked Franz Kafka. Plus
the name sounded cool for an open source project.
So basically there is not much of a relationship
источник

NR

Nikita Ryanov in pro.kafka
Прям ждал, когда мне понадобится информация о том, где искать ориджин имени ^_^
источник

ЛЗ

Лаврентий Закарян in pro.kafka
спасибо тебе, добрый человек
источник

AZ

Anton Zadorozhniy in pro.kafka
у них еще был интеграционный компонент Camus (Камю), который выгружал данные из Кафки в Хадуп )
источник

AB

Andriy Bashuk in pro.kafka
Привет ребят. Подскажите пожалуйста, когда нужно использовать RD_KAFKA_PARTITION_UA ?
источник

AB

Andriy Bashuk in pro.kafka
Использую High Level Consumer. Каким образом осуществляется скейлинг? Как я понимаю у меня если есть 3 партиции то я пушу в них как рандомное число 0,1,2 И просто добавляю столько же консюмеров сколько партиций. Так?
источник

AB

Andriy Bashuk in pro.kafka
High level consumer автоматически подписывается на нужную партицию, а если нужно то и на 2
источник

AB

Andriy Bashuk in pro.kafka
или 3
источник

VG

Vik Gamov in pro.kafka
Nikita Ryanov
Прям ждал, когда мне понадобится информация о том, где искать ориджин имени ^_^
Красавчик ©️
источник

VG

Vik Gamov in pro.kafka
Anton Zadorozhniy
у них еще был интеграционный компонент Camus (Камю), который выгружал данные из Кафки в Хадуп )
Камю - все...
источник

NN

Nick Nathanovich in pro.kafka
Подскажите пожалуйста... а как считается метрика totalfetchrequestspersec по какому нибудь топику?
источник

NN

Nick Nathanovich in pro.kafka
А то даже если наличествуют только брокеры и зоокиперы и больше никого, то по топику   данная метрика имеет значение 40, а если брать по всем топикам, то 600. И это не кажется нормальным
источник
2020 January 29

SB

Sergei Beilin in pro.kafka
Anton Zadorozhniy
у них еще был интеграционный компонент Camus (Камю), который выгружал данные из Кафки в Хадуп )
Ждём Orwell и Joyce? Хотя погодите, joycean - это либа для ивентсорсинга...
источник

N

Nikolay in pro.kafka
Nick Nathanovich
А то даже если наличествуют только брокеры и зоокиперы и больше никого, то по топику   данная метрика имеет значение 40, а если брать по всем топикам, то 600. И это не кажется нормальным
Почему ?
источник

NN

Nick Nathanovich in pro.kafka
Хм, а нормальна ли ситуация, когда потребление cpu у prometheus-jmx-exporter сравнимо с потреблением брокера? ну то есть у экспортера 210m, а у брокера 240m
источник

N

Nikolay in pro.kafka
Ну потребление цпу же относительно . На сколько процентов цпу загружен ?
источник