Error: UPGRADE FAILED: cannot patch "prometheus-operator-postgres-rules" with kind PrometheusRule: admission webhook "prometheusrulemutate.monitoring.coreos.com" denied the request: Rules are not valid

Всем здравствуйте. Собираю метрики в collectd, потом через graphite запихиваю в VictoriaMetrics. Ну и затем, через  MetricsQL/PromQL рисую графики в графане. Но есть следующие проблемы:

1)По autocomplete получаем officegw.sensors-coretemp-isa-0000.temperature-temp3
но работать оно будет только когда сделаем escape, officegw.sensors\-coretemp\-isa\-0000.temperature\-temp3. Я так понимаю надо заменять "-" на стороне collectd?
2)Нет удобного визарда как в datasource/influx, когда avg_over_time(officegw.sensors\-coretemp\-isa\-0000.temperature\-temp3 [5m]) можно выбрать в менюшке, не особо проблема, но любопытно, чего это они так прометеевский datasource обидели.

Если можно, подтолкните в правильном направлении по п.1, как-то не очень нравится заменять все -

Это ограничение датасорса для прометеуса. Он предполагает, что в именах метрик могут находиться только разрешенные символы для имен метрик, указанные в доках прометеуса - https://prometheus.io/docs/concepts/data_model/#metric-names-and-labels . ВМ же позволяет записывать в имена метрик и лейблов любые символы. Некоторые из них пересекаются с синтаксисом promql, поэтому они должны быть экранированы в запросах с помощью бэкслеша. Стандартный датасорс для прометеуса в графане про это не знает. Можно попробовать попросить разработчиков графаны добавить авиоматическое экранирование спецсимволов в именах метрик и лейблов при автодополнении. Может, добавят такю возможность.
По второму вопросу тоже лучше обращаться к разработчикам графаны через https://github.com/grafana/grafana/issues

нужно делать VM datasource, с блэкджеком, MetricsQL и anomaly detection

Ага

нужно делать VM datasource, с блэкджеком, MetricsQL и anomaly detection

юзайте hastic.io

юзайте hastic.io

Это ограничение датасорса для прометеуса. Он предполагает, что в именах метрик могут находиться только разрешенные символы для имен метрик, указанные в доках прометеуса - https://prometheus.io/docs/concepts/data_model/#metric-names-and-labels . ВМ же позволяет записывать в имена метрик и лейблов любые символы. Некоторые из них пересекаются с синтаксисом promql, поэтому они должны быть экранированы в запросах с помощью бэкслеша. Стандартный датасорс для прометеуса в графане про это не знает. Можно попробовать попросить разработчиков графаны добавить авиоматическое экранирование спецсимволов в именах метрик и лейблов при автодополнении. Может, добавят такю возможность.
По второму вопросу тоже лучше обращаться к разработчикам графаны через https://github.com/grafana/grafana/issues

есть успешные применения?

Это ограничение датасорса для прометеуса. Он предполагает, что в именах метрик могут находиться только разрешенные символы для имен метрик, указанные в доках прометеуса - https://prometheus.io/docs/concepts/data_model/#metric-names-and-labels . ВМ же позволяет записывать в имена метрик и лейблов любые символы. Некоторые из них пересекаются с синтаксисом promql, поэтому они должны быть экранированы в запросах с помощью бэкслеша. Стандартный датасорс для прометеуса в графане про это не знает. Можно попробовать попросить разработчиков графаны добавить авиоматическое экранирование спецсимволов в именах метрик и лейблов при автодополнении. Может, добавят такю возможность.
По второму вопросу тоже лучше обращаться к разработчикам графаны через https://github.com/grafana/grafana/issues

Не думаю что это хорошая идея портить датасорс графаны ради странных случаев такой совместимости.
Мне кажется проще на вашем уровне заменять эту нестандартную хрень

Это не нестандартная хрень, а стандартные имена метрик из графита. К сожалению, они не совместимы с прометеусовскими именами метрик. Проще написать свой датасорс для графаны, как предложил Рома.

можно добавить месячную метрику