Size: a a a

Церковь метрик

2020 June 05

AK

Andrey Kartashov in Церковь метрик
хотя по отдельности hits_over_period и misses_over_period это последовательность нулей
источник

SC

Smoked Cheese in Церковь метрик
Добавить or 0?
источник

AK

Andrey Kartashov in Церковь метрик
Smoked Cheese
Добавить or 0?
круто! Спасибо
источник

AK

Andrey Kartashov in Церковь метрик
но только я на 1 заменил, потому что мне это выгодней как 100% показывать. Если я потом алёрты буду делать на это дело, чтоб они не срабатывали просто на отсутствие работы
источник

ДС

Дмитрий Стародубцев... in Церковь метрик
Коллеги, добрый день. Кто-нибудь настраивал отправку уведомлений из Prometheus в OpsGenie?
источник

WA

Well Ageev in Церковь метрик
Дмитрий Стародубцев
Коллеги, добрый день. Кто-нибудь настраивал отправку уведомлений из Prometheus в OpsGenie?
настраивал
источник

WA

Well Ageev in Церковь метрик
из  alertmanager'a только
источник

ДС

Дмитрий Стародубцев... in Церковь метрик
Да, из него. У меня почему то не хочет отправлять, не понимаю что не так.

В alertmanager.yml я вставил вот это:
route:
 routes:
   - receiver: send_sms
     match_re:
       severity: service|critical

receivers:
- name: send_sms
 opsgenie_configs:
   - send_resolved: true
     http_config: {}
     api_key: *тут ключ, скопированный с сайта*
     api_url: https://api.opsgenie.com/
     message: '{{ template "opsgenie.default.message" . }}'
     description: '{{ template "opsgenie.default.description" . }}'
     source: '{{ template "opsgenie.default.source" . }}'
     responders:
     - name: test_team
       type: team
     priority: '{{ if .CommonAnnotations.priority }}{{ .CommonAnnotations.priority}}{{ else }}P1{{ end }}'


test_team - имя команды, которую я создал

В routes правило настроено по аналогии с правилом для почты, там всё приходит корректно
источник

ДС

Дмитрий Стародубцев... in Церковь метрик
Домен в OpsGenie создавался обычный, не eu
источник

WA

Well Ageev in Церковь метрик
api_url: https://api.opsgenie.com/ это в глобал надо
источник

ДС

Дмитрий Стародубцев... in Церковь метрик
Сейчас попробую. Я вообще уже пробовал туда ставить через opsgenie_url:, но не заработало
источник

p

ptchol in Церковь метрик
в лог алертменеджера посмотрите, не ругается ли он на что то там типа 401 unauthorized или ещё что
источник

ДС

Дмитрий Стародубцев... in Церковь метрик
пытаюсь найти логи...
источник

ДС

Дмитрий Стародубцев... in Церковь метрик
Такое может быть что он не логирует эти события? В статусе службы вот такая инфа:
● alertmanager.service - Alertmanager for prometheus
    Loaded: loaded (/etc/systemd/system/alertmanager.service; enabled; vendor preset: enabled)
    Active: active (running) since Fri 2020-06-05 08:23:31 UTC; 8min ago
  Main PID: 640240 (alertmanager)
     Tasks: 10 (limit: 9452)
    Memory: 9.5M
    CGroup: /system.slice/alertmanager.service
            └─640240 /usr/local/bin/alertmanager --config.file=/etc/alertmanager/alertmanager.yml --storage.path=/var/lib/alertmanager/


В /var/lib/alertmanager/ есть:
nflog
silences

Silences это пустой файл, в nflog только это и ничего не меняется после отправки алертов на почту:
�^A
�^A
|{}/{severity=~"^(?:service|critical|Error)$"}:{alertname="InstanceDown", instance="mailserver.mgt.test:9273", severity="critical"}^R^S

send_email^R^Eemail*^K^H����^E^P���a2   �����b^R^K^Hը��^E^P���a
источник

AS

Aleksey Sviridkin in Церковь метрик
Подскажите, а у графаны в провизионинге можно указать дашборды айдишниками из "каталога"?
С одной стороны, у провайдера есть тип "файл", с другой — я не вижу альтернативных вариантов заполнения в доке/гугле
источник

ДС

Дмитрий Стародубцев... in Церковь метрик
У кого-нибудь работает alertmanager не через docker? Никак не могу найти хоть какие-нибудь логи по отправленным алертам.
sudo journalctl --unit=alertmanager.service показывает только лог запуска службы
источник

C

Crysalis in Церковь метрик
дак может логи докер-кконтейнера алертменеджера надо смотреть?
источник

WA

Well Ageev in Церковь метрик
Crysalis
дак может логи докер-кконтейнера алертменеджера надо смотреть?
так у него он не в докере
источник

ДС

Дмитрий Стародубцев... in Церковь метрик
Гугл ничего дельного не подсказал (
источник

AS

Aleksey Sviridkin in Церковь метрик
Aleksey Sviridkin
Подскажите, а у графаны в провизионинге можно указать дашборды айдишниками из "каталога"?
С одной стороны, у провайдера есть тип "файл", с другой — я не вижу альтернативных вариантов заполнения в доке/гугле
Посмотрел сорцы, кажется только файлы и есть :(
источник