Это я знаю. Я хотел сделать дашборд по основным метрикам для всех хостов на одной странице. С переменными я сделал более развернутый дашборд. Спасибо!

Вот тут можно "повторять для каждого значения переменной". Возможно, то.

Господа, есть вопрос по Прометею: а можно ли выстрелить себе в ногу, используя метрики, созданные через recording rules, в других recording rules?

Таки нашел ответ, если кому надо https://www.robustperception.io/rule-groups-for-hierarchical-aggregation

В графане хочу из прометеуса отображать таблицу ключ-сумма по счётчику с разбиением по какому-то параметру.
Сейчас использую
sum(increase(счётчик)) by (параметр)
Но такой запрос плохо себя ведёт при перезапусках сервиса, что логично.
Подтолкните, пожалуйста, в нужном направлении.

Попробуйте  increase(счетчик[1h]). ВМ автоматически подставляет значение step, равное по умолчанию пяти минутам (если его не переопределила графана), в квадратные скобки, если оно там отсутствует. Поэтому в данном случае лучше явно указывать нужный интервал времени, на котором считать increase. Этот интервал должен превышать время рестарта сервиса и/или скрейп интервал по крайней мере в несколько раз, чтобы возвращались правильные зачения из increase при рестарте сервиса

Не помогает. Сейчас так и есть
increase(счетчик[$__range])
графанавский рейнж, по всему интервалу.

всем привет

народ, а по логстэшу кто-то может поодсказать?

написал фильтр:

input {
  beats {
    port => 5044
  }
}
## Add your filters / logstash plugins configuration here
filter {
  mutate { remove_field => "image" }
}

output {
 stdout {

  }
}

при просмотре логово логстэша поле не удалилось, может кто что подскажет?

вот скрин

данные получаю с filebeat

у вас image это объект, а не field. "[image][name]" вот так попробуйте

привет. настраиваю метрики на большом числе микросервисов.
сейчас есть три метрики latency (Summary) duration(Histogram) и count(Counter)

у сервисов есть паб саб через кафку

рпц через грпц

и рест через хттп

сейчас все тупо укладывается в эти три метрики, в качестве лейбла идет топик кафки, или имя метода грпц

единственный большой минус сейчаС, что нельзя сделать единые дашборды и тиражировать их между сервисами, так как люди сверху хотят видеть входящие запросы отделньо а исходящие отдельно. а по имени метрики это не ясно (зависит от ендпоинта и конкретноо сервиса)