Size: a a a

2019 December 19

A

Alex in pro.kafka
У кафки immutable таблицы, следовательно и реплицировать проще, вытягивай нужный сегмент по ренжу и все

Если у вас стейтфул сервис, то скорее всего вам нужно смотреть в направлении как делают репликации через wal лог. Любое изменение порождает запись что поменялось и дальше уже повторно apply этих изменений на нужном сервере. Для пустого старта предусмотреть как затянуть снепшот с соседа. Тут я бы предложил смотреть на какой mysql (репликации через wal бинлоги, но там только догон по wal) и mongodb (там и вытягивание снепшота и догонка по wal)

Не советую смотреть касандру, так как там с их меркел трии и евеншуал консистенси закопаетесь
источник

VG

Vik Gamov in pro.kafka
Vladislav Sidorovich
Согласен, но есть возможности поэтому изучаем сколько будет стоить
Я рекомендую читать Мартина Клепмана
источник

VG

Vik Gamov in pro.kafka
источник

VG

Vik Gamov in pro.kafka
источник

VS

Vladislav Sidorovich in pro.kafka
Уже
источник

VS

Vladislav Sidorovich in pro.kafka
Спасибо
источник

AZ

Anton Zadorozhniy in pro.kafka
Alex
У кафки immutable таблицы, следовательно и реплицировать проще, вытягивай нужный сегмент по ренжу и все

Если у вас стейтфул сервис, то скорее всего вам нужно смотреть в направлении как делают репликации через wal лог. Любое изменение порождает запись что поменялось и дальше уже повторно apply этих изменений на нужном сервере. Для пустого старта предусмотреть как затянуть снепшот с соседа. Тут я бы предложил смотреть на какой mysql (репликации через wal бинлоги, но там только догон по wal) и mongodb (там и вытягивание снепшота и догонка по wal)

Не советую смотреть касандру, так как там с их меркел трии и евеншуал консистенси закопаетесь
золотые слова; я могу только добавить что для очень крутого погружения Кайл Кингсберри (известный как Aphyr) иногда читает курс по распределенным системам, где он дает обзор и можно как угодно глубоко копнуть любую из тем (обычно это на два дня и времени достаточно) - очень рекомендую если вы хотите писать свою (или дописывать чужие) распределенные дата менеджемент системы https://github.com/aphyr/distsys-class
источник

AZ

Anton Zadorozhniy in pro.kafka
по сути это пробежка по тем же темам что DDIA плюс куча war stories и возможность задавать вопросы, я поймал пару лет назад этот курс в Берлине, очень полезно было (хотя его взгляды и предпочтения по организации реплик я не во всем принимаю)
источник

VS

Vladislav Sidorovich in pro.kafka
Вот это уже интересно. Есть какие-то "наводки" на эти лекции) я бы хотел попасть
источник

AZ

Anton Zadorozhniy in pro.kafka
Vladislav Sidorovich
Вот это уже интересно. Есть какие-то "наводки" на эти лекции) я бы хотел попасть
проще всего написать Кайлу и спросить его про творческие планы) aphyr@jepsen.io
источник

VS

Vladislav Sidorovich in pro.kafka
Спасибо
источник

AZ

Anton Zadorozhniy in pro.kafka
я был на его тренинге в https://www.innoq.com но это был разовый, проще всего действительно его спросить, есть ли у него публичный тренинг в ближайшее время и где; а если у вас действительно серьезные намерения то можно и заказать
источник

VG

Vik Gamov in pro.kafka
Anton Zadorozhniy
проще всего написать Кайлу и спросить его про творческие планы) aphyr@jepsen.io
Его кстати вроде в тви забанили или суспенднули
источник

AZ

Anton Zadorozhniy in pro.kafka
Vik Gamov
Его кстати вроде в тви забанили или суспенднули
он же воинственный гей, могли.. на почту отвечает
источник

AZ

Anton Zadorozhniy in pro.kafka
у него был очень NSFW твиттер, но иногда там были полезные вещи)
источник

VS

Vladislav Sidorovich in pro.kafka
хз, что такое воинственный гей, но я уже переживаю что написал ему на почту)
источник

VG

Vik Gamov in pro.kafka
Vladislav Sidorovich
хз, что такое воинственный гей, но я уже переживаю что написал ему на почту)
Все ок - keep it professional
источник

AZ

Anton Zadorozhniy in pro.kafka
Да, на работе это не сказывается, он супер-профи; просто в твиттере было много мужской обнаженки и на хайлоад отказался в РФ приезжать, был такой публичный скандальчик
источник

VS

Vladislav Sidorovich in pro.kafka
))))
источник

VG

Vik Gamov in pro.kafka
Anton Zadorozhniy
Да, на работе это не сказывается, он супер-профи; просто в твиттере было много мужской обнаженки и на хайлоад отказался в РФ приезжать, был такой публичный скандальчик
О, а про HL не слышал
источник