Всем привет. Есть с десяток "изолированных" окружений, на которых периодически на длительный срок может отваливаться внешний интернет. Хочется чтобы метрики собирались внутри окружения, а потом, когда интернет появился - можно было забрать их на какой-то центральный прометей, например. Реально ли это сделать федерацией прометеев, или исторические данные там не поддерживаются от слова совсем, и в центральный прометей данные будут поступать только когда прометеи-таргеты онлайн? Может делал кто-то что-то подобное уже?
для этого лучше поставить в каждом изолированном окружении vmagent, который будет собирать внутренние метрики и отправлять их на внешний сторедж по prometheus remote_write api при появлении соединения. См.
https://victoriametrics.github.io/vmagent.html