РА
как правило в компании есть уже готова платформа виртуализации
Size: a a a
2019 November 27
РА
с заложенной уже туда избыточностью для отказоустойчивости
РА
и я с вами даже согласен что это не сработает
РА
но вот почему не сработает не согласен
A
Надеяться на отказоустойчивость хранилища или базы за счёт виртуализации и при этом не включать встроенный режим репликации - звучит странно?
РА
одна единственная проблема в этом случае на мой взгляд это fsync’и
РА
но если мне не изменяет память, то вмваря перевозит тачку сохраняя состояние памяти
A
Fsync тут и так не честный в кафке
РА
Надеяться на отказоустойчивость хранилища или базы за счёт виртуализации и при этом не включать встроенный режим репликации - звучит странно?
на старте для экономии ресурсов why not?
AB
Всем привет.
Кто-нибудь встречал такую проблему?
Возникает в kafka connect:
Preparing to rebalance group state PreparingRebalance with old generation (reason: Updating metadata for member)
Кто-нибудь встречал такую проблему?
Возникает в kafka connect:
Preparing to rebalance group state PreparingRebalance with old generation (reason: Updating metadata for member)
РА
Fsync тут и так не честный в кафке
честный же вроде, просто не на каждое сообщение
РА
в целом очень часто бывает дешевле и проще отдать отказоустойчивость на откуп платформе виртуализации
A
Кафка для больших нагрузок имеет смысл
Кажется, если у вас старт возможен на 1 инстансе кафки, вам не нужна кафка
Кажется, если у вас старт возможен на 1 инстансе кафки, вам не нужна кафка
A
честный же вроде, просто не на каждое сообщение
Как это тогда он честный?
A
Честный это как в постгресе
РА
окей не честный
РА
но собственно я о том же
РА
это единственный варик потерять данные если ВМ в КВМ
GM
Держать standalone и лвм снапшоты )
один совет лучше другого
VG
Могу развернуть немного)
1. Зачем брать распределённую систему чтобы ее использовать в standalone ? Скорее всего выбор технологии изначально неверный
2. Не знаю таких серверов, которые на 100% гарантируют отсутствие даунтйма. Даже если они есть, то в придачу к ним ещё и сеть должна идти и электропитание бесперебойное и тд. Если у вас есть деньги на такие сервера, есть деньги и на несколько простых серверов, которые для кафки будут и дешевле и эффективнее
1. Зачем брать распределённую систему чтобы ее использовать в standalone ? Скорее всего выбор технологии изначально неверный
2. Не знаю таких серверов, которые на 100% гарантируют отсутствие даунтйма. Даже если они есть, то в придачу к ним ещё и сеть должна идти и электропитание бесперебойное и тд. Если у вас есть деньги на такие сервера, есть деньги и на несколько простых серверов, которые для кафки будут и дешевле и эффективнее
Соглашусь с предыдущим оратором. Кафка и многие современные популярныеnosql базы созванивались стартапами у которых не было денег на топовое железо. Поэтому отказоустойчивость вкладывалась в дизайн системы с первого дня.