Size: a a a

Церковь метрик

2021 July 09

MN

Maksim Noskov in Церковь метрик
1) В inCaller не влазит большая портянка алертов, он начинает бесконечно спамить об ошибке в чат
2) Интерактив:
Available commands:
/start - Subscribe for alerts.
/stop - Unsubscribe for alerts.
/status - Print the current status.
/alerts - List all alerts.
/silences - List all silences.
/chats - List all users and group chats that subscribed.
источник

AF

Andrey F in Церковь метрик
> большая портянка алертов
всю жисть мечтал
источник

DP

Daniil Poddubnyi in Церковь метрик
понял, спасибо
источник

DP

Daniil Poddubnyi in Церковь метрик
часто интерактивом пользуетесь?
источник

MN

Maksim Noskov in Церковь метрик
В основном удобно разрабам быстро смотреть что сейчас замьючено и какие алерты активны без доступа в вебку алертменеджера.
источник

PJ

Philip J. Fry in Церковь метрик
Думаю освежить версию алертменеджера или например посмотреть что у тебя в сайленсе из телеги гораздо удобнее, чем лезть на сервак и шерстить конфиг
источник

MN

Maksim Noskov in Церковь метрик
inhibit не сразу на всё предусмотришь)
источник

D🦆

Dmitry 🦆 in Церковь метрик
Привет, помогите советом, как принято решать такую проблему.
Хотим сделать метрики по времени ответа от апстрима для каждого сервиса и отображать их в графане.
Как это лучше реализовать?

Метрики у нас в InfluxDB. Сервисы на разных стеках разных языков.
Соответственно что-то должно собирать метрики из приложения и класть их в InfluxDB.
На первый взгляд приходит решение парсинга логов: информация из сервиса будет поподать в логи и отфильтровываться каким-либо агентом.

В некоторых стеках возможно в параллельном потоке пушить такие данные напрямую, но:
- мне не нравится модель прямой зависимости. Предпочитаю обратные, когда инфраструктура сама пулит данные
- не во всех стеках такое возможно без проблем, например в ПХП мы не можем иметь соседний поток, а соседний процесс с сайдкаром может доставить сложности
источник

T

Talib in Церковь метрик
привет  всем ,  а не подскажете- как то можно значение Лейблы из Временного ряда впхнуть в значение лейблы из алерта ?  вот как на картинке ( не в аннотацию а в лейблу)
источник

IE

Ivan EKbfh in Церковь метрик
Или я не понял или ты хочешь стрелять себе в ногу
источник

A

Andor in Церковь метрик
Оно и так туда попадает из зарроса алерта
источник

T

Talib in Церковь метрик
оно не попадает в сам Алерт .  В дескрипшн ( точнее в аннотацию)  можно вставить  {{ $labels.instance }}

а вот в label:   ???  в то место что на картинке

я хочу алерт отправлять к черту на кулички если instance = blablabla

значение инстанса содержится в лейбле метрики , но использовать   при роутинге алертов  match_re я чето не пойму  как  ..

или туплю или это не возможно
источник

T

Talib in Церковь метрик
вобщем вот пример метрик - я хочу чтоб все инстансы kafka  алерты летели в другое место . и выколупать оттуда значение  чтобы использовать  в алертменеджере в роутинге алерта
источник

A

Andor in Церковь метрик
сделай два алерта с фильтрацией по инстансу
источник

T

Talib in Церковь метрик
это я уже придумал , но там  их назревает штук 20  этих разных мест для роутинга. , и придется делать  20 одинаковых алертов.  и  подумал " а может как то можно выколупать из самой метрики значение " и на ее основе  уже  одним алертом  обойтись.  но походу низя  :(
источник

A

Andor in Церковь метрик
> оно не попадает в сам Алерт . В дескрипшн ( точнее в аннотацию) можно вставить {{ $labels.instance }}

попадает
источник

T

Talib in Церковь метрик
хм , проверял експерементально - не вышло .  попробую еще раз
источник

G

GithubReleases in Церковь метрик
ClickHouse/ClickHouse description changed: v21.7.2.7-stable
Link: https://github.com/ClickHouse/ClickHouse/releases/tag/v21.7.2.7-stable
Release notes:
ClickHouse stable release v21.7.2.7-stable
источник

T

Talib in Церковь метрик
спасибо, все работат. И в доке же написано что должно работать - первый раз попробовал , не вышло и потерял веру.
источник

A

Andor in Церковь метрик
Вот и славно
источник