Коллеги, доброго времени суток. Полез знакомиться с Grafana Loki и застрял на попытке заставить его слать алерты в Alertmamager.
Тестовое правило /etc/loki/rules/rule.yaml
groups:
- name: TEST-ERR
rules:
- alert: TEST-ERR Occured
annotations:
message: "TEST-ERR occured"
expr: sum by (host)(count_over_time({host="GDC"}[5m])) > 0
for: 1m
labels:
severity: critical
Конфигурация ruler:
ruler:
storage:
type: local
local:
directory: /etc/loki/rules/
rule_path: /etc/loki/scratch/
alertmanager_url:
http://loki.testserver.local:9093 ring:
kvstore:
store: inmemory
enable_api: true
enable_alertmanager_v2: true
Логов валится около 5к записей в минуту. Loki запускаю от sudo, /etc/loki - 777 права рекурсивно. Может есть у кого пример живой конфигурации или совет, как заставить эту связку работать?