Size: a a a

2019 November 26

A

Anatoly Soldatov in pro.kafka
Ivan EKbfh
Ну, я буду разворачивать это дело не в кубах, а на вм, поэтому оркестрация знает все адреса, поэтому это не плюсы, это наименьшая кровь. Тащить туда еще агентов SD ради этого излишне имхо
Непонятно)
Вы же агентов не руками ставите
Написали один раз роль для кафки в ансибле, папете или где-то ещё и все
источник

A

Anatoly Soldatov in pro.kafka
Если дискавери уже и так есть, добавить туда кафки не сложно должно быть
А так у вас получается странный дискавери, который не про все знает на самом деле
источник

IE

Ivan EKbfh in pro.kafka
Anatoly Soldatov
Если дискавери уже и так есть, добавить туда кафки не сложно должно быть
А так у вас получается странный дискавери, который не про все знает на самом деле
Аргумент, но я хотел бы разделить эти две системы, вот и всё
источник

EK

Eduard Korolev in pro.kafka
посмотрел доклад от баду про надежность кафки. А у кого нибудь есть один кластер кафки без реплик? С одним вообще беда будет, или это для реально высоконагруженных систем. Например я хочу внедрить кафку, событий мало, но по мере внедрения их станет больше.
источник

DP

Denis Pavlyuchenko in pro.kafka
что такое "кластер кафки без реплик"? не очень понял, какая это конфигурация
источник

EK

Eduard Korolev in pro.kafka
тфу
источник

EK

Eduard Korolev in pro.kafka
брокер один
источник

DP

Denis Pavlyuchenko in pro.kafka
так это ж не продакшен конфигурация (брокер дохнет. и всё, конец данным и работе системы)
источник

EK

Eduard Korolev in pro.kafka
почему конец? например послали 300 000 к сообщений, на 250-м он призадумался, перестал принимать запросы, через 10 минут очухался и дальше стал принимать. Ну пропустит он коммит оффсета одного другого
источник

DP

Denis Pavlyuchenko in pro.kafka
1) Что будет делать producer в течение 10 минут?
2) А что ,если брокер не очухается через 10 минут?
источник

EK

Eduard Korolev in pro.kafka
1) ошибку получать и терять сообщения. Фигово, но если у нас один продюсер может задосить брокера, то после того как первый упадет, мастером станет ведущий раздел на другом брокере - он и другой брокер в даун положит.
источник

DP

Denis Pavlyuchenko in pro.kafka
В случае нескольких брокеров, все партиции размазаны по брокерам (в идеале, равномерно), и нагрузка тоже размазана
источник

EK

Eduard Korolev in pro.kafka
спасибо за ответы))
источник
2019 November 27

VG

Vik Gamov in pro.kafka
Raman Babich
Привет, что значит префикс ccs и ce в артефактах?

https://packages.confluent.io/maven/org/apache/kafka/kafka_2.12/
confluent community и confluent enterprise
источник

AM

Aset Madraimov in pro.kafka
Eduard Korolev
посмотрел доклад от баду про надежность кафки. А у кого нибудь есть один кластер кафки без реплик? С одним вообще беда будет, или это для реально высоконагруженных систем. Например я хочу внедрить кафку, событий мало, но по мере внедрения их станет больше.
На старте можно и стэндэлон конфигурацию использовать и масштабироваться со временем. А отказоустойчивость обеспечить на уровне инфраструктуры.
источник

AM

Aset Madraimov in pro.kafka
Ну и посмотреть сами данные, насколько они партиционируемы, без партиций горизонтального масштабирования нет.
источник

RB

Raman Babich in pro.kafka
Vik Gamov
confluent community и confluent enterprise
Благодарю.
источник

RS

Rudik Siraev in pro.kafka
Приветствую, коллеги. Есть вопрос такой: несколько методов аутентификации на одном кластере брокера кто делал? Интересует одновременно plain и oauth
источник

A

Anatoly Soldatov in pro.kafka
Aset Madraimov
На старте можно и стэндэлон конфигурацию использовать и масштабироваться со временем. А отказоустойчивость обеспечить на уровне инфраструктуры.
Не слушайте плохие советы :)
Данные если потеряете, не важно на старте это или нет
источник

РА

Рамиль Ахмадеев in pro.kafka
Anatoly Soldatov
Не слушайте плохие советы :)
Данные если потеряете, не важно на старте это или нет
развернутый и понятный ответ 🙂
источник