раньше был intel snap

но он сдох

netdata может

https://graphite.readthedocs.io/en/latest/tools.html#collection но ваще вот

Bioyino

Это не коллекторы а аггрегаторы

пусть это тут полежит. может пригодится кому.

- alert: BlackboxEndpointDown
  expr: probe_success == 0
  labels:
    ....
  annotations:
    summary: "Endpoint {{ $labels.instance }} down"
    description: "BlackBox exporter can't scrape data from endpoint"
    runbook: https://kb.....
    status_code: |
      {{ with printf "probe_http_status_code{instance='%s'" .Labels.instance | query }} {{ . | first | value }} {{ end }}
    probe_duration: |
      {{ with printf "probe_duration_seconds{instance='%s'" .Labels.instance | query }} {{ . | first | value |humanizeDuration}} {{ end }}
    pattern_not_found: |
      {{ with printf "probe_failed_due_to_regex{instance='%s'" .Labels.instance | query }} {{ . | first | value }} {{ end }}

#rules

- alert: BlackboxEndpointDown
  expr: probe_success == 0
  labels:
    ....
  annotations:
    summary: "Endpoint {{ $labels.instance }} down"
    description: "BlackBox exporter can't scrape data from endpoint"
    runbook: https://kb.....
    status_code: |
      {{ with printf "probe_http_status_code{instance='%s'" .Labels.instance | query }} {{ . | first | value }} {{ end }}
    probe_duration: |
      {{ with printf "probe_duration_seconds{instance='%s'" .Labels.instance | query }} {{ . | first | value |humanizeDuration}} {{ end }}
    pattern_not_found: |
      {{ with printf "probe_failed_due_to_regex{instance='%s'" .Labels.instance | query }} {{ . | first | value }} {{ end }}

https://github.com/samber/awesome-prometheus-alerts
А слелайте сюда пулл реквест?

Подскажите, пожалуйста. Вот запрос:

pg_database_size{datname!~"template.*", datname!~"postgres", instance=~"$server", datname=~"$database"}/(1024*1024*1024)

Как поправить запрос к prometheus для получения графика top-5 pg_database_size?

topk?

Я пробовал topk, но он график у меня не отображает. Отображает только таблицу.

А как вы себе представляете для это график? О_о

Минутка истории https://youtu.be/bFiEq3yYpI8

30 минут скорее тогда )

Всем привет, кто-нибудь использует promxy(https://github.com/jacksontj/promxy) для аггрегации метрик с нескольких прометеев?
Интересует несколько вопросов
1) как именно она опрашивает эндпоинты с метриками? я было подумал что с помощью прометейного remote_read но не нашел в коде подтверждения этому
2) насколько стабильно работает и были ли какие подводные камни при импелминтации?

Я использую)
1. Просто указываешь несколько эндпойнтов прома в конфигуратор промкси, и при запросе промкси спросит у них и вернёт результат со всех
2. Работает стабильно, пару раз натыкался на не реализованные фичи, но автор супер быстро реагирует на ишью с нормальным описанием и все фиксится

@Nklya спасибо! а ты все прометеи в одной server_groups указываешь или можно разбивать на несколько?

Несколько групп.
В одной группе могут быть дублирующие прометеусы как я понимаю

@avelikiy =)

Народ, я тут работаю над новым плагином для графаны. Кто-нибудь хочет потестить? :)