Телеграмм чат группы metrics

2021 January 27

A

Anton in Церковь метрик

Aleksey Shirokikh

pushgateway или text_file_collector у node_exporter

о, текст коллектор же! забыл про него

спасибо!

источник

20:35пожаловаться #1

AV

Aliaksandr Valialkin in Церковь метрик

Lex Dolgov

Все привет. А есть у кого опыт больших инсталляций victoriametrics в синглмод?

Пытаюсь перелезть на нее с Прометея, столкнулся с проблемами на больших выборках.
На вход около 2млн метрик. И при этом пытаюсь достать через rules около 700к упираюсь в тайм-аут в 3минуты.
Прометей такое прожевывает, но при этом сильно больше хочет рамы и места )) именно поэтому и хочу с него слезть

Можете скинуть запрос, который так долго выполняется?

источник

20:48пожаловаться #2

AV

Aliaksandr Valialkin in Церковь метрик

Alexey Polyakov

Господа, кто-то пробовал большие csv в vm пихать, больше чем 262144 байт на которые апи ругается и которые не настраиваются нигде? Пока не вижу иного выхода как бить файлы на мелкие, но это жесть будет, т.к. данных просто море

У вм есть лимит на длину одной csv строки. Похоже, вы упираетесь в него. У вас в одной строке больше 200кб данных? У вм нет лимита на количество строк в одном запросе - она должна прожевать хоть миллиард строк, отправленных через один запрос.

источник

20:51пожаловаться #3

В

Вадим in Церковь метрик

Aliaksandr Valialkin

См. https://valyala.medium.com/improving-histogram-usability-for-prometheus-and-grafana-bc7e5df0e350

спасибо - почитаю

источник

20:59пожаловаться #4

AP

Alexey Polyakov in Церковь метрик

Aliaksandr Valialkin

У вм есть лимит на длину одной csv строки. Похоже, вы упираетесь в него. У вас в одной строке больше 200кб данных? У вм нет лимита на количество строк в одном запросе - она должна прожевать хоть миллиард строк, отправленных через один запрос.

Да, на лимит и наплролся, но проблема была, как выше написал, в том что курл склеивает строки из файла, если не binary использовать.

источник

21:05пожаловаться #5

AV

Aliaksandr Valialkin in Церковь метрик

Alexey Polyakov

Да, на лимит и наплролся, но проблема была, как выше написал, в том что курл склеивает строки из файла, если не binary использовать.

Ага, уже дочитал до этого сообщения :)

источник

21:09пожаловаться #6

LD

Lex Dolgov in Церковь метрик

Aliaksandr Valialkin

Можете скинуть запрос, который так долго выполняется?

Конечно. Завтра скину )

источник

21:54пожаловаться #7

В

Вадим in Церковь метрик

Aliaksandr Valialkin

См. https://valyala.medium.com/improving-histogram-usability-for-prometheus-and-grafana-bc7e5df0e350

статья об оптимизации создания и хранения гистограмм в victoriaMetrics - пока нет возможности изучать и спользовать ее
хотелось бы понять что на практике лучше использовать - гистограммы или саммариз?

источник

21:58пожаловаться #8

2021 January 28

AL

Aleksey Lazarev in Церковь метрик

Есть у кого нибудь ссыль на репу с пресетами алертов по всяким nodeexporteram кубам и тд для прома?

источник

08:00пожаловаться #9

BD

Banschikov Denis in Церковь метрик

Aleksey Lazarev

Есть у кого нибудь ссыль на репу с пресетами алертов по всяким nodeexporteram кубам и тд для прома?

https://github.com/samber/awesome-prometheus-alerts

GitHub

samber/awesome-prometheus-alerts

🚨 Collection of Prometheus alerting rules. Contribute to samber/awesome-prometheus-alerts development by creating an account on GitHub.

источник

08:37пожаловаться #10

ED

Evgeny Danilenko in Церковь метрик

ребят, посоветуйте alermanager -> telegram софт . вообщем чтоб парсил хуки нормально и в телегу алерты слал . уж очень не хочется slack ставить )

источник

09:46пожаловаться #11

M

Matvey in Церковь метрик

Evgeny Danilenko

ребят, посоветуйте alermanager -> telegram софт . вообщем чтоб парсил хуки нормально и в телегу алерты слал . уж очень не хочется slack ставить )

amixr ;)

источник

09:49пожаловаться #12

M

Matvey in Церковь метрик

Мы уже умеем без слака, но это секрет

источник

09:49пожаловаться #13

VS

Vladislav 👻 Shishkov... in Церковь метрик

Evgeny Danilenko

ребят, посоветуйте alermanager -> telegram софт . вообщем чтоб парсил хуки нормально и в телегу алерты слал . уж очень не хочется slack ставить )

https://github.com/metalmatze/alertmanager-bot

GitHub

metalmatze/alertmanager-bot

Bot for Prometheus' Alertmanager. Contribute to metalmatze/alertmanager-bot development by creating an account on GitHub.

источник

09:53пожаловаться #14

VS

Vladislav 👻 Shishkov... in Церковь метрик

https://github.com/inCaller/prometheus_bot

GitHub

inCaller/prometheus_bot

Telegram bot for prometheus alerting. Contribute to inCaller/prometheus_bot development by creating an account on GitHub.

источник

09:54пожаловаться #15

AL

Aleksey Lazarev in Церковь метрик

Banschikov Denis

https://github.com/samber/awesome-prometheus-alerts

GitHub

samber/awesome-prometheus-alerts

🚨 Collection of Prometheus alerting rules. Contribute to samber/awesome-prometheus-alerts development by creating an account on GitHub.

благодарю

источник

10:09пожаловаться #16

ED

Evgeny Danilenko in Церковь метрик

Vladislav 👻 Shishkov

https://github.com/inCaller/prometheus_bot

GitHub

inCaller/prometheus_bot

Telegram bot for prometheus alerting. Contribute to inCaller/prometheus_bot development by creating an account on GitHub.

спасибо

источник

10:11пожаловаться #17

ED

Evgeny Danilenko in Церковь метрик

Matvey

Мы уже умеем без слака, но это секрет

всмысле не в проде еще ?

источник

10:13пожаловаться #18

M

Matvey in Церковь метрик

Evgeny Danilenko

всмысле не в проде еще ?

Не, все в проде, просто еще на сайт не добавили

источник

10:14пожаловаться #19

ED

Evgeny Danilenko in Церковь метрик

и второй вопрос, кто как борется с не характерными патернами нагрузки(резкий скачок/падение или сезонность), которые трудно описать min/max лимитами . начал смотреть в сторону https://github.com/AICoE/prometheus-anomaly-detector
но на первый взгляд так себе решение.
Речь про прометей + графана

источник

10:16пожаловаться #20