VZ
Понял. Спасибо
Size: a a a
2020 March 03
РН
Редхат на последней конференции в Москве рассказывали про балансировку Kafka в openshift. Схема работы нетривиальна.
Ds
Редхат на последней конференции в Москве рассказывали про балансировку Kafka в openshift. Схема работы нетривиальна.
а есть видео запись?
РН
а есть видео запись?
Не встречал. Они упомянули про это при рассказе про openshift в RHEL 8, а потом у стенда об этом поговорили. Вот тут концепция есть, но мне не пригодилось. https://developers.redhat.com/blog/2018/10/29/how-to-run-kafka-on-openshift-the-enterprise-kubernetes-with-amq-streams/
AZ
народ а в кафке как-то можно разделить и сделать группы с одинаковыми именами топиков? допустим для разных стендов? или обязательно в имя топик уникальный идентификатор для стенда вводить
имя топика уникально, да, все делают префиксы или постфиксы
AU
а log.retention отдельно по топикам не настраивается?
настраивается, по времени или размеру
V
настраивается, по времени или размеру
а как, чет не видел, думал только общий
AU
например так: /opt/kafka/bin/kafka-configs.sh --zookeeper IP:port --alter --entity-type topics --entity-name my_topic --add-config retention.ms=3000000
AZ
а log.retention отдельно по топикам не настраивается?
log.retention.* это брокерская настройка, но retention.* это настройка топика которая по-умолчанию берется из брокера, но может быть переопределена для топика
A
спасиб, значит другого способа нет
А что вы решаете? У двух разных стендов один кластер кафки?
A
Можно в хедеры каждому сообщению прописывать какому стенду оно доступно для чтения
Либо как выше написали, разделить на неймспейсы через префиксы/постфиксы
Либо как выше написали, разделить на неймспейсы через префиксы/постфиксы
VG
Кстати, @gamussa, подскажи, плиз, почему отсутствие сжатия на продюсере это none, а на уровне топика это uncompressed ?:) всегда было интересно почему не сделали одинаковый нейминг
хз, блеск и нищета опинсорса. Долгое время меня бесило что в консольном консьюмере было Servers list (или как-то так) а в продьюсере было bootstrap servers
НИ
хз, блеск и нищета опинсорса. Долгое время меня бесило что в консольном консьюмере было Servers list (или как-то так) а в продьюсере было bootstrap servers
Как косяки списывать так опенсорс, а как купоны стричь так Сonfluent platform!!!
VG
Как косяки списывать так опенсорс, а как купоны стричь так Сonfluent platform!!!
Все ещё ждём твой PR 😜