AI
Все таки редис это k=v, а кролик это очереди сообщений и соответствующий тулкит
Size: a a a
2020 October 26
AI
Работает. Надежно. Даже уже коллеги нам проверили фейловер😂
А мониторинг уже прилепили?
S
Ага - я мониторю длину в очереди - этого более чем достаточно
AI
Ага - я мониторю длину в очереди - этого более чем достаточно
Как мониторишь? Метрики собираешь? Прометей? Забюикс? Алерты настроил?
S
Как только начали собирать эту статистику - она раньше была "темной материей" - сразу выяснилось что балансировщик работает плохо, откуда вылезает часть проблем и тд
AI
Как только начали собирать эту статистику - она раньше была "темной материей" - сразу выяснилось что балансировщик работает плохо, откуда вылезает часть проблем и тд
Так куда вы ее собираете?
S
Заббикс. Никаких алертов или триггеров пока нет - только информация ежесекундная о длине очереди
AI
Заббикс. Никаких алертов или триггеров пока нет - только информация ежесекундная о длине очереди
Нет алертов - жди внезапных падений прода
S
Каких именно?
AI
Каких именно?
То что у тебя очередь забьется например
S
Любые проблемы на сервере прежде проявляются на работе всего остального. Упадет один редис - ну все переключится на второй - проверено.
S
Не забъется
AI
Редис он вроде в памяти сидит всегда
S
Проверено
S
Разгребается со свистом
AI
Он может на диск сбрасывать, но надо чтобы памяти хватало
AI
Разгребается со свистом
Пока у тебя не отвалится обработчик
AI
Кролик переживет этот момент потому что сбросит эти гигабайты на диск. А редис? А не потащит ли эта очередь в редисе что то еще завязанное на редис?
S
Там systemd - если обработчик падает тот его передергивает. Потеря - только 1 сообщение, которое было в работе
AI
Там systemd - если обработчик падает тот его передергивает. Потеря - только 1 сообщение, которое было в работе
А так у тебя при крэше еще и сообщение теряется