СХ
Size: a a a
2020 March 31
СХ
чем обязаловка как в hadoop/clickhouse
A
или главная причина в другом?
В скорости коммитов. В случае трёх фазного коммита латенси инсертов растет в 2-3 раза т.к. схема такая:
А теперь экстраполируй когда у тебя не 2 ноды, а 20 или 200
1ая нода: у меня есть транзакция на запись
1ая -> 2ой: ты готов записать?
2ая -> 1ой: да
1ая: записывает
1ая -> 2ой: держи данные
2ая: записывает
1ая -> 2ой: записал?
2ая -> 1ой: записал
1ая: закрывает инсерт как успешный
А теперь экстраполируй когда у тебя не 2 ноды, а 20 или 200
A
И количество записей не 1, а несколько сотен в секунду
СХ
да и смысл имеет только при юзе ibm почтовика
A
Также зукипер хранит расположение шардов и реплик. Таким образом твои данные равномерно размазаны по кластеру и в случае выпадания ноды происходит ребаланс (ну и в случае добавления)
СХ
и другой древней ынтепрайз коробки где кассандре 2 версии
СХ
Также зукипер хранит расположение шардов и реплик. Таким образом твои данные равномерно размазаны по кластеру и в случае выпадания ноды происходит ребаланс (ну и в случае добавления)
ну это скорее архитектурный минус кликхауса
СХ
как и тот что например у кликхауса выгоднее делать одиночные инстансы и каждому свою задачу, нежели кластер и задачи на кластер
RD
Также зукипер хранит расположение шардов и реплик. Таким образом твои данные равномерно размазаны по кластеру и в случае выпадания ноды происходит ребаланс (ну и в случае добавления)
а зукипер самостоятельно производит репликацию данных на свои ноды?
SP
а зукипер самостоятельно производит репликацию данных на свои ноды?
сам, да
RD
а зукипер самостоятельно производит репликацию данных на свои ноды?
или, скажем реплика кликхауса сама обходит все ноды и забирает с каждой дельту?
SP
ещё там ephemeral znodes есть
A
или, скажем реплика кликхауса сама обходит все ноды и забирает с каждой дельту?
Сам обходит
A
а зукипер самостоятельно производит репликацию данных на свои ноды?
И он говорит кому куда что скопировать и как эти данные побить на шарды
RD
круто, вижу профит)
RD
то есть задача кликхауса просто положить данные в зукипер, навесить вотчер в котором есть логика импорта данных?
RD
нода изменилась, сработал вотчер, реплика отрегарировала и забрала данные
RD
как то так?)
EL
ну это скорее как костыль снаружи
ты сказал "к кассандре он отношения не имеет", что за маняврирование?