Size: a a a

2019 October 29

GP

Grigory Pomadchin in Data Engineers
Старый Хрыч
😐кстати а пробовал кто в кафке хранить файлы
с большими сообщениями Кафка не живет
источник

РА

Рамиль Ахмадеев in Data Engineers
но это не самый лучший ее юзкейс
источник

СХ

Старый Хрыч in Data Engineers
Grigory Pomadchin
с большими сообщениями Кафка не живет
ну у меня на прошлом проекте жила, но не сказать что хорошо, но там были не бинери по типу мп3 конечно
источник

GP

Grigory Pomadchin in Data Engineers
мне приходилось для норм работы даже джейсоны с фс грузить
источник

GP

Grigory Pomadchin in Data Engineers
А ты хочешь мп3 файлы кидать
источник

СХ

Старый Хрыч in Data Engineers
🙄ну а какую очередь тогда программистам посоветовать
источник

GP

Grigory Pomadchin in Data Engineers
пусть в кафку суют урлы на мп3
источник

PK

Pavel Klemenkov in Data Engineers
Старый Хрыч
🙄ну а какую очередь тогда программистам посоветовать
А че, если придут миллион пользователей слушать один и тот же трек, то его миллион раз в кафку зальют что ли?
источник

СХ

Старый Хрыч in Data Engineers
Pavel Klemenkov
А че, если придут миллион пользователей слушать один и тот же трек, то его миллион раз в кафку зальют что ли?
не придут это для атс, грубо говоря там всего 10 постоянных файлов и 1 который создаётся из тех 10
источник

СХ

Старый Хрыч in Data Engineers
чтобы его проигрывать как пин
источник

СХ

Старый Хрыч in Data Engineers
проблема в том, что файл создался и нужен только 1 раз, пока его не прослушают а потом его надо удалить
источник

A

Alex in Data Engineers
Мы пихали в s3 и по кафке урл/Id гнали
источник

A

Alex in Data Engineers
Зачем в кафку файлы то пихать?
источник

СХ

Старый Хрыч in Data Engineers
Alex
Зачем в кафку файлы то пихать?
чтобы удалить как будет забран атской
источник

A

Alex in Data Engineers
Так забрал и удалил из s3
источник

A

Alex in Data Engineers
Перед комитом в кафку
источник

GP

Grigory Pomadchin in Data Engineers
да можно что угодно в кафку лить пока оно маленькое;
источник

GP

Grigory Pomadchin in Data Engineers
Если твои мп3 до мегабайта лей
источник

GP

Grigory Pomadchin in Data Engineers
источник

GP

Grigory Pomadchin in Data Engineers
Но конечно странное решение
источник