VictoriaMetrics/VictoriaMetrics tagged: v1.37.1
Link: https://github.com/VictoriaMetrics/VictoriaMetrics/releases/tag/v1.37.1
Release notes:

### Changes since v1.37.0

*   FEATURE: vmalert: allow to disable rules expression validation. This feature may be useful for using `vmalert` with PromQL-compatible datasources like Loki. See [#521](https://github.com/VictoriaMetrics/VictoriaMetrics/...

More

prometheus/prometheus tagged: 2.19.1 / 2020-06-18
Link: https://github.com/prometheus/prometheus/releases/tag/v2.19.1
Release notes:

*   [BUGFIX] TSDB: Fix m-map file truncation leading to unsequential files. [#7414](https://github.com/prometheus/prometheus/pull/7414)

prymitive/karma tagged: v0.64
Link: https://github.com/prymitive/karma/releases/tag/v0.64
Release notes:

This release improves [Alertmanager cluster](https://prometheus.io/docs/alerting/latest/alertmanager/#high-availability) handling:

*   `cluster: foo` option can be now set for each alertmanager (see [docs](https://github.com/prymitive/karma/blob/v0....

More

prymitive/karma description changed: v0.64
Link: https://github.com/prymitive/karma/releases/tag/v0.64
Release notes:

This release improves [Alertmanager cluster](https://prometheus.io/docs/alerting/latest/alertmanager/#high-availability) handling:

*   `cluster: foo` option can be now set for each alertmanager (see [docs](https://github.com/prymitive/karma/blob/v0....

More

Кто то сталкивался с ситуацией когда prometheus-operator удаляет из TSDB метрики удаленных подов после удаления самих подов из неймспейса? это какая то тонкость конфигурации контролируемая или бага?

вот есть у меня три пода за последние 2 часа
я первые два пода удалил, но я хочу видеть на тех же дашбордах графаны те же самые метрики, что были при запущенных подах

а по результату вижу только метрики запущенного третьего пода

как затюнить конфигурацию прома чтобы можно было видеть метрики всех ресурсов(API) на всем промежутке времени?

там есть delete_series https://github.com/coreos/prometheus-operator/search?q=delete_series&unscoped_q=delete_series
но в пром операторе это не юзается

я пока не сильно углубился в конфу оператора

а не может быть так, что пром отображает только те лейблы с ресурсами, которые ему отдает kube-state-metrics/API, и как только под удаляется, вот это вот дискавери перестает работать?

не не, он же накапливает

вот пример даже с локальной инфры, пару дней назад был таргет под экспортер, таргет тогда же был выпилен из конфигурации, метрики к нему остались. а с кубовой конфигой не работает такая стандартная схема =(

а какой retention стоит?

стандартный 10 дней

то есть метрики не то чтобы прям старые ушли
метрики подов которые сущестовали 5 минут назад не сохраняются

магии нет, пром ходит на эндоинты и забирает, то что ему отдали, складывает это в tsdb и оно там лежит себе спокойненько, пока не придет retention или прямой вызов delete_series через апи

delete_series пишется в лог?

тогда можно было бы попробовать его поймать с удалением пода

https://prometheus.io/docs/guides/query-log/#enable-the-query-log без этого врятли, или смотреть что там по логлевелу, возможно дебаг может

### Changes since v1.37.0

*   FEATURE: vmalert: allow to disable rules expression validation. This feature may be useful for using `vmalert` with PromQL-compatible datasources like Loki. See [#521](https://github.com/VictoriaMetrics/VictoriaMetrics/...

Никто еще не прикручивал компоненты от пром оператора, чтобы собирать метрики/алертить без прома?

В работе оператор - поддержка пром компонентов рулы сервис монитор и все что есть в Виктории

Скоро выкатим если надо beta доступ пиши в пм

да. хотя нет, алерты не делал, только сбор метрик