Size: a a a

Церковь метрик

2020 June 02

p

ptchol in Церковь метрик
а что делать ?
источник

p

ptchol in Церковь метрик
ну там же со временем явно будет дисбаланс по нодам.
источник

AS

Aleksey Shirokikh in Церковь метрик
Внимательно думать нужно ли это
источник

S

Slach in Церковь метрик
Vladimir Smirnov
а в чем проблема графаны тут?
4 раза жмем refresh, четыре раза разный график

в prometheus который единственный источник. данные возвращаются нормально
источник

p

ptchol in Церковь метрик
Aleksey Shirokikh
Внимательно думать нужно ли это
я может что то не оч понимаю, но просто добавляя ноды в кластер рано или поздно мы получим что одна занята на 90%  а новая на 1%. нет ?
источник

AS

Aleksey Shirokikh in Церковь метрик
ты правильные вопросы задаёшь, но вот кажется мне что преждевременные с учётом данных которые хранятся.
источник

AS

Aleksey Shirokikh in Церковь метрик
пока кейс "добавлять ноды в кластер" отсутствует как класс
источник

p

ptchol in Церковь метрик
Aleksey Shirokikh
ты правильные вопросы задаёшь, но вот кажется мне что преждевременные с учётом данных которые хранятся.
я опишу ситуацию. у нас сейчас несколько промов (пром оператор), и мы рассматриваем vm как multi tenancy скейлящийся сторадж.
и скейлится хочется довольно плавно.
источник

AS

Aleksey Shirokikh in Церковь метрик
у меня тоже несколько пром операторов и несколько промов. я подошёл к проектированию схемы как к статической конфигурации а не динамической
источник

VS

Vladimir Smirnov in Церковь метрик
Slach
4 раза жмем refresh, четыре раза разный график

в prometheus который единственный источник. данные возвращаются нормально
а ты проверял что ответы прям одни и те же?
источник

p

ptchol in Церковь метрик
Aleksey Shirokikh
пока кейс "добавлять ноды в кластер" отсутствует как класс
ну там написано что ноды можно добавить и vmselect сам будет бегать по нодам, и искать серию если не нашёл на одной из. так что так или иначе на select работать все будет.
источник

AS

Aleksey Shirokikh in Церковь метрик
селекты и инсерты добавлять и правда можно в любой момент это не оч критично
источник

S

Slach in Церковь метрик
Vladimir Smirnov
а ты проверял что ответы прям одни и те же?
в смысле в grafana datasource?
проверю когда еще раз наступлю
источник

AS

Aleksey Shirokikh in Церковь метрик
но что делать со сторадж нодами и как им сделать "динамическую" конфигурацию пока не понятно
источник

VS

Vladimir Smirnov in Церковь метрик
Slach
в смысле в grafana datasource?
проверю когда еще раз наступлю
условно открыть inspection и сохранить  ответы от прома и сравнить
источник

AS

Aleksey Shirokikh in Церковь метрик
сейчас я бы сказал что сделать это нельзя
источник

p

ptchol in Церковь метрик
Aleksey Shirokikh
сейчас я бы сказал что сделать это нельзя
а replication factor тоже никак не восстановить ? тоесть vminsert записал на N нод и считает что всё сохранено. И никак не проверяется что одна из нод погибла, была заменена, и у части старых метрик rf стал равен 2
так ?
источник

AS

Aleksey Shirokikh in Церковь метрик
ptchol
а replication factor тоже никак не восстановить ? тоесть vminsert записал на N нод и считает что всё сохранено. И никак не проверяется что одна из нод погибла, была заменена, и у части старых метрик rf стал равен 2
так ?
так. rf появился чуть больше недели назад и в целом механизм пока эволюционирует
источник

i

inqfen in Церковь метрик
Evgeny V.
Нене, система-то под контролем.
Но идея проверять именно внешнюю доступность, т.е. условно говоря 3-5 запросов из разных датацентров в мире.
Можно pingdom заюзать
источник

AS

Aleksey Shirokikh in Церковь метрик
мы обсуждали с коллегами эту ситуацию они понимают что без ребалансинга это такой себе rf
источник