хотя по отдельности hits_over_period и misses_over_period это последовательность нулей

Добавить or 0?

круто! Спасибо

но только я на 1 заменил, потому что мне это выгодней как 100% показывать. Если я потом алёрты буду делать на это дело, чтоб они не срабатывали просто на отсутствие работы

Коллеги, добрый день. Кто-нибудь настраивал отправку уведомлений из Prometheus в OpsGenie?

настраивал

из  alertmanager'a только

Да, из него. У меня почему то не хочет отправлять, не понимаю что не так.

В alertmanager.yml я вставил вот это:
route:
 routes:
   - receiver: send_sms
     match_re:
       severity: service|critical

receivers:
- name: send_sms
 opsgenie_configs:
   - send_resolved: true
     http_config: {}
     api_key: *тут ключ, скопированный с сайта*
     api_url: https://api.opsgenie.com/
     message: '{{ template "opsgenie.default.message" . }}'
     description: '{{ template "opsgenie.default.description" . }}'
     source: '{{ template "opsgenie.default.source" . }}'
     responders:
     - name: test_team
       type: team
     priority: '{{ if .CommonAnnotations.priority }}{{ .CommonAnnotations.priority}}{{ else }}P1{{ end }}'


test_team - имя команды, которую я создал

В routes правило настроено по аналогии с правилом для почты, там всё приходит корректно

Домен в OpsGenie создавался обычный, не eu

api_url: https://api.opsgenie.com/ это в глобал надо

Сейчас попробую. Я вообще уже пробовал туда ставить через opsgenie_url:, но не заработало

в лог алертменеджера посмотрите, не ругается ли он на что то там типа 401 unauthorized или ещё что

пытаюсь найти логи...

Такое может быть что он не логирует эти события? В статусе службы вот такая инфа:
● alertmanager.service - Alertmanager for prometheus
    Loaded: loaded (/etc/systemd/system/alertmanager.service; enabled; vendor preset: enabled)
    Active: active (running) since Fri 2020-06-05 08:23:31 UTC; 8min ago
  Main PID: 640240 (alertmanager)
     Tasks: 10 (limit: 9452)
    Memory: 9.5M
    CGroup: /system.slice/alertmanager.service
            └─640240 /usr/local/bin/alertmanager --config.file=/etc/alertmanager/alertmanager.yml --storage.path=/var/lib/alertmanager/


В /var/lib/alertmanager/ есть:
nflog
silences

Silences это пустой файл, в nflog только это и ничего не меняется после отправки алертов на почту:
�^A
�^A
|{}/{severity=~"^(?:service|critical|Error)$"}:{alertname="InstanceDown", instance="mailserver.mgt.test:9273", severity="critical"}^R^S

send_email^R^Eemail*^K^H����^E^P���a2   �����b^R^K^Hը��^E^P���a

Подскажите, а у графаны в провизионинге можно указать дашборды айдишниками из "каталога"?
С одной стороны, у провайдера есть тип "файл", с другой — я не вижу альтернативных вариантов заполнения в доке/гугле

У кого-нибудь работает alertmanager не через docker? Никак не могу найти хоть какие-нибудь логи по отправленным алертам.
sudo journalctl --unit=alertmanager.service показывает только лог запуска службы

дак может логи докер-кконтейнера алертменеджера надо смотреть?

так у него он не в докере

Гугл ничего дельного не подсказал (

Посмотрел сорцы, кажется только файлы и есть :(