В input ты можешь повесить только экстрактор - там только операции с логами, например распарсить поле. Там вроде нельзя дропать сообщения. Но если даже можно (хотя я не вижу такого в экстрактрах) как там задать логику - из 100 одинаковых сообщений дропни 99?

Инпут или филтерчейн с аггрегацией, то что нужно для твоего тротлинга

фильтрчейн это что?

Ну вон картинка, доки есть на каждый кубик

да, фильровать по стримам и дропать легко. А вот как сделать то что я хочу - непонятно
Например в pipeline идет обработка конкретного сообщения - $message, как в нем проверить что 100 предыдущих были такими же?

??

ты имел в виду streammatchfilter - ну так это условие по которому лог попадет в стрим и все

Кароче я понял - ты имел в виду фильтры и всякие функции аггрегации для алертов, а не тротлинг логов.
С 3 версии ваще огонь, добавили дофига функций аггрегаций, это им зачет конечно

Если ты хочешь галочку такую такой кажется нет, под рукой грейлога нет. Но это можно реализовать пайплайнами в любом случае. Ченить тупо нацеплять стримов в чейн. или, в инпуте или в филтерчейн включить аггрегацию и по триггеру вываливать все в девнулл. До триггера все запишется. Я не уверен, ответил я на твой вопрос или нет. И да, нет там простой такой галочки, типа пишем первое и потом дискард.

Год почти прошел, сообщество еще не готово? Очень хочу узнать, как без registry жить, статью пишешь?

Чот я даже читать это не хочу)

В чате завоз новой травы?)

Кубер может делать прелоад, но на каждой ноде собирать каждый раз имадж, а если их сорок

Подман это тул, который умеет управлять контейнерами oci, но это не рантайм же

Полагаю имелось ввиду процесс подробный тому который выстраивается с помощью knative, где сборка docker-образа является частью деплоя приложения, но registry там по прежнему используется, хоть и прозрачно для разработчика

Запустить кубер на подман это такое же утверждение, как например, что машина едет из-за  колёс.

Походу нельзя, pipeline дальше текущего лога не видит (если ты имеешь в виду system => pipelines).

Стримы никак не управляют тем, попадают логи в базу или нет - они тут не помогут.

Дроп конкретного лога по условию полей из этого лога сделать очень легко, а как нарисовать условие ("если в течении минуты пришло 100 одинаковых логов, до дропни 99 из них) - не ясно. Скорее всего невозможно.

В инпуте только эксракторы - это условия парсинга логов, они за это вообще не могут отвечать. Они просто преобразовывают сообщение по каким-то условиям

Под филтерчейном  ты  видимо имеешь в виду rules для стримов - это просто условие попадания в конкретный стрим, оно тут тоже не поможет.

Аггрегация это функции в поиске логов и в условиях алертов - нельзя дропать логи по алерту, алерт просто отправляет куда-то сообщение.

А я тут вчера наткнулся на приблуду, которая позволяет ассеты прямо в docker-имаджах хранить:

Кароче, твоё утверждение что стримы никак не управляют неверно, я картинку тебе нарисовал. Весь этот функционал можно реализовать в filterchain