Хе хе

Привет
кто нибудь имел опыт с https://github.com/milvus-io/milvus в проде?
коллеги думают использовать ее для хранения эмбеддингов и подсчета коснусной похожести в риалтайме.

Посмотри на библиотеку от facebook

да, я знаю она там под капотом, но вот как раз интересует, все что milvus вокруг нее накрутил

funcorp использует насколько я в курсе

есть еще аналоги
https://github.com/vdaas/vald

ага, у них статья есть на хабре

а про эту штуку в проде что нибудь известно?

Есть еще аналог
https://qdrant.tech/
https://github.com/qdrant
По поводу прода можно спросить у разработчиков, они отвечают

Спасибо!

Мне показалось или кто-то быстро среагировал? =)

Да

да - показалось 😆

Приветы, а пишет кто-нибудь мессаджеры, которые под большой нагрузкой работают? Интересен вопрос - используете ли вы fanout . Так понимаю, что WhatsApp и Discord делают именно fan-out при посыле сообщения в группу. Т.е посылаю я в группу в WhatsApp сообщение. Сервер смотрит кто еще в этой группе и кладет сообщение в inbox этих пользователей. Получается, что выигрыш в том, что при считывании клиент читает все записи последовательным чтением и нет необходимости в random reads (наверное есть, но все же меньше, если по всем группам собирать нужные сообщения).  Хотя  про дискорд меньше уверенности у меня в Fan-out. Есть такое же предположение про telegram. Говорили мне, что если делать экспорт сообщений в файл, то получается, что у каждого клиента в этом файле свои айдишники.

всеми любимы Мартин Клепман в "книге с кабанчиком" рассказывал про релевантный кейс в твиттере (на вот этом примере https://www.infoq.com/presentations/Twitter-Timeline-Scalability/ )

@tsafin  а где почитать про асинзроную репликацию  и проасинхроную репликацию в  тарантуле

хороший вопрос. Думаю подробнее чем в доках пока не найти https://www.tarantool.io/en/doc/latest/book/replication/repl_sync/

спасибо

а есть что прочитать про сам алгоритм ?

хотя, нет, есть еще кое-что. https://docs.tarantool.dev/en/latest/replication.html
хотя там парни не вносили еще деталей про синхронную репликацию (последние правки от апреля 2020, тогда "синхры" еще не было)