a6
OpsDev
Всем привет! Есть некое приложение, которое пишет что то в папку, есть ли технологии которые производят синхронное/асинхронное реплицирование всех файлов в этой директории например на другой диск в live режиме?
zfs,drdb,gluster
Size: a a a
2021 February 11
K
МММ... Ага. тоесть свой даблчек нужен
смотря насколько критична потеря. в общем надо думать, но по всем остальных критериям - мне кажется это именно то что нужно
O
zfs,drdb,gluster
Благодарю!
PT
смотря насколько критична потеря. в общем надо думать, но по всем остальных критериям - мне кажется это именно то что нужно
Да, потеря критична. там и финлоги в том числе. Пойду курить-тестить. Спасибо.
K
Да, потеря критична. там и финлоги в том числе. Пойду курить-тестить. Спасибо.
у меня это чеки, каждый рубль важен. но у меня есть gold- данные, которые я периодически сверяю и доливаю туда (в клик) данные если вдруг чегото не хватает.
a6
ну чеки можно и в реббите хранить фиксируя их в орацкле или постгре
K
ну чеки можно и в реббите хранить фиксируя их в орацкле или постгре
хранить и в реббите - вещи несовместимые)
PT
смотря насколько критична потеря. в общем надо думать, но по всем остальных критериям - мне кажется это именно то что нужно
Да, а если включить кворумную запись? Выглядит подходяще.
А сверять - да, я это и имел в виду под даблчеком. Влил бандл - через таймаут его же чекнул
А сверять - да, я это и имел в виду под даблчеком. Влил бандл - через таймаут его же чекнул
K
Да, а если включить кворумную запись? Выглядит подходяще.
А сверять - да, я это и имел в виду под даблчеком. Влил бандл - через таймаут его же чекнул
А сверять - да, я это и имел в виду под даблчеком. Влил бандл - через таймаут его же чекнул
честно не пробовал, и проверки периодической более чем достаточно, поэтому не стали заморачиваться
a6
хранить и в реббите - вещи несовместимые)
ну не хранить конечно же держать очередь из этих чеков, у меня вот чеков в день может быть и 150к
a6
а может и 1кк прилететь
K
от 1кк+ реббиту обычно плохо становится и он кашлять кровью начинает
PT
ну чеки можно и в реббите хранить фиксируя их в орацкле или постгре
Оракл здорово, наверное, но бабла стоит.
А очередь - кафка. как-то с ней спокойнее..:)
А очередь - кафка. как-то с ней спокойнее..:)
K
вот кафка как раз не очень хорошо для финасовых данных подходит, как мне кажется.
PT
вот кафка как раз не очень хорошо для финасовых данных подходит, как мне кажется.
почему?
K
в общем мы на реббите остановились и довольны этому
a6
Оракл здорово, наверное, но бабла стоит.
А очередь - кафка. как-то с ней спокойнее..:)
А очередь - кафка. как-то с ней спокойнее..:)
Не, если в 1-2 инстансах он бесплатен, стоят денег люди которые в него умеют (про RAC,BI речи не идёт, это дорого да).
PT
Не, если в 1-2 инстансах он бесплатен, стоят денег люди которые в него умеют (про RAC,BI речи не идёт, это дорого да).
И это тоже :)
a6
вот кафка как раз не очень хорошо для финасовых данных подходит, как мне кажется.
Кафка перегружена ненужным дерьмом, если очереди простые и кластер простой, то лучше реббит
K
почему?
сложности с масштабированием кол-ва консьюмеров на лету, только потоки, без индивидуальности - а иногда нужно воротить сложные схемы с соблюдением строгой последовательности. также активно пользуемся очередями задержки, повторных попыток итд