IR
что угодно
Size: a a a
2020 January 16
RS
тогда почему тебя не парит что от клиента данные могут не дойти
а у тебя есть магические средства это предотвратить? 🙂
IR
ну ок почему готовые решения не подходят
IR
logstash/filebeat/acid бд
IR
да даже rocksdb какая-нибудь
RS
тогда почему тебя не парит что от клиента данные могут не дойти
потому-что одно дело когда пару сотен клиентов не могут подключиться по своей вине
и совершенно другое дело, когда все клиенты стоят, потому-что сервис стоит и ждёт упавшую/пропавшую кафку 🙂
и совершенно другое дело, когда все клиенты стоят, потому-что сервис стоит и ждёт упавшую/пропавшую кафку 🙂
RS
ну ок почему готовые решения не подходят
я выше написал, особенности в API
IR
чтобы кафка упала
IR
нужно чтобы все ее брокеры упали
IR
можешь сделать 15 брокеров
IR
и не выдумывать дичь
RS
чтобы кафка упала
или просто кабель между одним компом и другим в дц оборвался/перегорел/магически_исчез и microservice временно не может до кафки достучаться 🙂
RS
и не выдумывать дичь
когда от вашего софта будут зависить человеческие жизни - возможно вы поймёте что 0.1% потенциальных ситуаций тоже стоит учитывать.
IR
ок, тут сложно спорить
SB
это гораздо менее вероятно чем network split между
X и кафкой, это локальный процесс на той-же тачкеНу почему, наоборот, оркестратор внезапно решит, что под ваш нужно грохнуть - например, чтоб поднять на другом ноде или ООМ. По опыту, это в самом деле происходит гораздо чаще, чем недоступность кластера.
A
У реббита есть такое, у кафки, насколько мне известно, нет механизма оповещения продюсеров о получении консюмерами сообщений
В Кафке есть транзакции
VG
В Кафке есть транзакции
они не e2e - продьюсер не узнает получил ли консьюмер
A
они не e2e - продьюсер не узнает получил ли консьюмер
Противоречит со статьей :)
Там «This feature also allows you to commit your consumer offsets in the same transaction along with the data you have processed, thereby allowing end-to-end exactly-once semantics.»
Там «This feature also allows you to commit your consumer offsets in the same transaction along with the data you have processed, thereby allowing end-to-end exactly-once semantics.»