ни разу не приходилось лазить в реббит :)
есть zeromq еще.

Кафка не может в констюмерский no-ack, она про стриминг. Это ближе к nats streaming и redis streams.

Вместо кафки есть repanda, они вроде как побыстрее

То есть в кафке нельзя отправлять сообщения в один конец не накапливая их в очереди? Правильно ли я понимаю no-ack?

Возможно, нужны эксперты по кафке, а не я, но, как мне кажется ответ «нет».

важно понять, что кафка - не очередь, а лог. из очереди можно достать и, если что, вернуть обратно.
если клиент взял сообщение и не сказал в ответ через некоторое время ACK (если упал) или если сказал NO-ACK (нешмогла), то сообщение остается в очереди.
т.е. если коньсьюмеров >1, то сообщение получит следующий. ну или оно проваляется в очереди, пока упавший не поднимется.

в случае с логом - ничего никуда не исчезает при чтении. есть лог и смещение в этом логе.

в очереди продюсер не думает как будут читаться его сообщения. в случае с логом важно сразу писать так, чтоб удобно было читать.

есть еще такой подход: https://en.wikipedia.org/wiki/Dead_letter_queue

То есть в кафке нельзя отправлять сообщения в один конец не накапливая их в очереди? Правильно ли я понимаю no-ack?

Спасибо за развернутый ответ.
Да, скорее всего мне дорога в AMQP протокол, все-таки бесконечно накапливать очередь и читать оттуда лишь смещениями - мне не очень подходит, но буду изучать еще это более детально.

ОО, это вообще больная тема для меня.
Я два дня провел в исследованиях готовых решений.

Кафка да, слишком жирная и мне не нравится что при переподключении к той самой группе происходит ребалансировка которая занимает время.

MQTT (в частности mosquitto) тоже не подошёл ибо у него нет очереди.

Nats по той же причине отвалился ибо у него нет асинхронных очередей.

Реббит когда то очень давно использовал, вроде неплохо кроме того что он слишком заморочен с этими анонимными очередями и сам по себе медленный, плюс ерланг.. страшно использовать то, чего я не понимаю (yet!)

В итоге пока что как временное решение взял редис, ибо если консюмер отвалился и я получаю 0 от паблиша, я могу в очередь lpush-ем напихать сообщений, и потом консюмером разматывать пропущенное.

Может вы сможете дать совет - мне бы какой нибудь брокер, который можно развернуть на своей инфраструктуре, у которого низкий latency, который умеет ещё и отправлять месаги в очередь, а затем консюмер, получив месагу, должен подтвердить что она получена, чтобы больше ее не получать (удалить из очереди). Но при этом должна быть возможность и без очереди: просто слать в один конец без подтверждения (at most once)
Я уже почти сдался и почти сел на Го педалить свое решение.

а вы посмотрели xreadgroup в редисе? :)

Почему нет таких людей в пхп(

Лишь бы тут не распространяли эту болезнь.

Вы просто сидели не в тех чатах, в чатике по симфони  очень много просветителей.  В лоравеле наверное всё плохо с этим.

токсичность это к сожалению современные реалии СНГ-сообщества. меня это очень печалит

токсичность это к сожалению современные реалии СНГ-сообщества. меня это очень печалит