Size: a a a

Церковь метрик

2020 May 26

I

Ivan in Церковь метрик
народ, подскажите пож - у меня почему то при вычислении квантиля из метрики с бакетом в одном случае все ок, а в другом - NaN

формула такого формата: histogram_quantile(0.95, sum(rate(clickhouse_reads_bucket[5m])) by (pod,le))

данные на выходе такие:
clickhouse_reads_bucket{le="10"}, 14
clickhouse_reads_bucket{le="20"}, 155
clickhouse_reads_bucket{le="50"}, 201
clickhouse_reads_bucket{le="100"}, 203
clickhouse_reads_bucket{le="200"}, 203
clickhouse_reads_bucket{le="300"}, 259
clickhouse_reads_bucket{le="500"}, 327
clickhouse_reads_bucket{le="+Inf"}, 352
источник

G

GithubReleases in Церковь метрик
grafana/grafana tagged: v7.0.1
Link: https://github.com/grafana/grafana/releases/tag/v7.0.1
Release notes:
release v7.0.1
источник

S

Slach in Церковь метрик
Ivan
народ, подскажите пож - у меня почему то при вычислении квантиля из метрики с бакетом в одном случае все ок, а в другом - NaN

формула такого формата: histogram_quantile(0.95, sum(rate(clickhouse_reads_bucket[5m])) by (pod,le))

данные на выходе такие:
clickhouse_reads_bucket{le="10"}, 14
clickhouse_reads_bucket{le="20"}, 155
clickhouse_reads_bucket{le="50"}, 201
clickhouse_reads_bucket{le="100"}, 203
clickhouse_reads_bucket{le="200"}, 203
clickhouse_reads_bucket{le="300"}, 259
clickhouse_reads_bucket{le="500"}, 327
clickhouse_reads_bucket{le="+Inf"}, 352
точно NaN ? а не no data ?
выражение вроде нормальное
источник

I

Ivan in Церковь метрик
Slach
точно NaN ? а не no data ?
выражение вроде нормальное
Ага. Там чот с данными было, потом очухалось
источник

AS

Aleksey Shirokikh in Церковь метрик
Зато что promlabs/promlens показывает кардинальность метрик сразу мне он очень люб
источник

S

Slach in Церковь метрик
а кто нибудь может внятно объяснить зачем в prometheus для increase вкрутили экстраполяцию?
и что мне делать, если у меня есть счетчик ошибок
и мне на графике надо показать тупо кол-во ошибок которое случилось в какой то промежуток времени?
а в результате я получаю какой то не внятный float который мне как то надо объяснить
источник

AS

Aleksey Shirokikh in Церковь метрик
Slach
а кто нибудь может внятно объяснить зачем в prometheus для increase вкрутили экстраполяцию?
и что мне делать, если у меня есть счетчик ошибок
и мне на графике надо показать тупо кол-во ошибок которое случилось в какой то промежуток времени?
а в результате я получаю какой то не внятный float который мне как то надо объяснить
его вкрутили не для increase это datamodel такая
источник

AS

Aleksey Shirokikh in Церковь метрик
Slach
а кто нибудь может внятно объяснить зачем в prometheus для increase вкрутили экстраполяцию?
и что мне делать, если у меня есть счетчик ошибок
и мне на графике надо показать тупо кол-во ошибок которое случилось в какой то промежуток времени?
а в результате я получаю какой то не внятный float который мне как то надо объяснить
источник

A

Andrey in Церковь метрик
пытаюсь перемигрировать клиентов из datadog в prometheus
метрики в datadog шлются в statsd формате но с некоторым отличием: https://docs.datadoghq.com/developers/dogstatsd/?tab=hostagent#dive-into-dogstatsd
"DogStatsD and StatsD are broadly similar, however, DogStatsD contains advanced features which are specific to Datadog, including available data types, events, service checks, and tags"
никто не видел случаем или не реализовывал экспортера для этого формата?
источник

A

Andrey in Церковь метрик
вроде как https://github.com/prometheus/statsd_exporter поддерживает - пойду проверю
источник

PK

Pavel Kolobaev in Церковь метрик
кто нибудь смог заставить alertmanager работать в HA режиме, без дублирования оповещений?
источник

WA

Well Ageev in Церковь метрик
Pavel Kolobaev
кто нибудь смог заставить alertmanager работать в HA режиме, без дублирования оповещений?
это что значит?
источник

PK

Pavel Kolobaev in Церковь метрик
аллерменджер умеет в кластер
источник

PK

Pavel Kolobaev in Церковь метрик
мне пока удалось сделать только обмен silences. Но я вижу по issues что народ както умудряетя сделать еще и оповещения в одном экземпляре.
источник

AS

Aleksey Shirokikh in Церковь метрик
ещё как поддерживает
источник

S

Slach in Церковь метрик
Спасибо, прочитал, прослезился
а ты его сам читал? в смысле до конца ? ;)
это ж блин... я даже не знаю, чуваку с ником free надо памятник поставить за терпение  и адекватность

@valyala спасибо вам за то, что вы нормально считаете increase, а есть какой нибудь аналог kubernetes prometheus-operator но для VIctoriaMetrics и когда вообще VM созреет чтобы стать replacement для прометеуса?
источник

AS

Aleksey Shirokikh in Церковь метрик
Pavel Kolobaev
мне пока удалось сделать только обмен silences. Но я вижу по issues что народ както умудряетя сделать еще и оповещения в одном экземпляре.
они по умолчанию так. правда они для этого должны знать друг о друге
источник

AS

Aleksey Shirokikh in Церковь метрик
Slach
Спасибо, прочитал, прослезился
а ты его сам читал? в смысле до конца ? ;)
это ж блин... я даже не знаю, чуваку с ником free надо памятник поставить за терпение  и адекватность

@valyala спасибо вам за то, что вы нормально считаете increase, а есть какой нибудь аналог kubernetes prometheus-operator но для VIctoriaMetrics и когда вообще VM созреет чтобы стать replacement для прометеуса?
да чувак хорош.
источник

AS

Aleksey Shirokikh in Церковь метрик
Pavel Kolobaev
мне пока удалось сделать только обмен silences. Но я вижу по issues что народ както умудряетя сделать еще и оповещения в одном экземпляре.
там довольно хитрый кластер.
на самом деле каждый их алертманагеров будет слать уведомление.
источник

AS

Aleksey Shirokikh in Церковь метрик
но они между собой по gossip обмениваются матаинфой о том кто с какой задержкой будет отправлять уведомления
источник