.
И если уж гулять на полную и ставить Прометей, то может стоит сразу собирать (P)ELK стак чтоб собирать заодно и логи?
зависит от нужд
Size: a a a
2020 April 18
AA
по комьюнити видно как любителей графитового стека мало
.
можно попробовать ELK, можно попробовать Graylog/Grafana, можно попробовать Loki/Grafana
A
Вот такое же думал. А не знаете, нормальные ли питоновские либы для этих пушгейтвеев?
.
чтоб метрики с логами сразу на один даш
SK
в классическом виде 1 значение от одного контейнера создаст виспер файл который будет жить вечно, со сжатием чуть веселей, с КХ тоже в принципе норм
A
Но, вообще, там и без всяких либ несложно пушить
AA
как только не посоветуют запилить пром для указанной цели, но лишь бы не внедрять графит
b
вопрос будет ли меняться имя метрики
Не, имена у нас заранее будут заданы.
Вообще в нашей монорепо любая точка входа оборачивается кастомным декоратором, который если нужно создает сессию с БД, который знает свой путь, например
По-моему идеально будет генерировать дефолтный префикс с помощью этого декоратора.
Вообще в нашей монорепо любая точка входа оборачивается кастомным декоратором, который если нужно создает сессию с БД, который знает свой путь, например
src/org/scripts/googleapis/crawl_serp.py:main.По-моему идеально будет генерировать дефолтный префикс с помощью этого декоратора.
AA
в классическом виде 1 значение от одного контейнера создаст виспер файл который будет жить вечно, со сжатием чуть веселей, с КХ тоже в принципе норм
сейчас в виспер файл вряд ли современно юзать, проще сразу в CH
SK
проще, но не всегда )
SK
как и у любого случая есть корнер кейсы
AA
просто если вдруг решат слать разные метрики, то место вдруг быстро может закончится. Обычно разработчики не заботятся - решили слать доп метрики - берут и шлют
b
как только не посоветуют запилить пром для указанной цели, но лишь бы не внедрять графит
А вообще графит это ж тот самый агрегатор и стораж, которые умеют сжимать метрики тем больше чем они дальше назад во времени? Таким образом история будет иметь меньшую гранулярность и размер базы не диске будет фиксированным.
b
просто если вдруг решат слать разные метрики, то место вдруг быстро может закончится. Обычно разработчики не заботятся - решили слать доп метрики - берут и шлют
Мы кравлингом занимаемся, объемы довольно большие. Прометей или что там будет фактически хранить метрику, оно не умеет сжимать? VictoriaMetrics вот выше советовали.
AA
А вообще графит это ж тот самый агрегатор и стораж, которые умеют сжимать метрики тем больше чем они дальше назад во времени? Таким образом история будет иметь меньшую гранулярность и размер базы не диске будет фиксированным.
речь про rollup? да, умеет (если делать через CH)
b
речь про rollup? да, умеет (если делать через CH)
А стек графит это был оригинальный проект, который первый это реализовал? Мне помнится что там была какая-то поделка на nodejs
AA
там сейчас зоопарк, конструктор лего - собирай как хочешь
AA
А вообще графит это ж тот самый агрегатор и стораж, которые умеют сжимать метрики тем больше чем они дальше назад во времени? Таким образом история будет иметь меньшую гранулярность и размер базы не диске будет фиксированным.
AA
Движок предназначен для прореживания и агрегирования/усреднения (rollup) данных Graphite.