Size: a a a

2020 December 17

GK

Gregory Koshelev in pro.kafka
Есть ещё совет: делать в трёх ДЦ ¯\_(ツ)_/¯
источник

VG

Vik Gamov in pro.kafka
Чат! Есть эксперты по Кафке тут 😅?
Компания Нетология, отдел b2b, ищет эксперта по Apache Kafka для проведения обучения в формате вебинаров. Заказчик - крупный банк, аудитория - мидл разработчики. Условия обсуждаются индивидуально, оплата в рынке 👌🏼 Пишите @yanavech 🙏🏼

// пысы мопед не мой ™️
источник

IK

Ilya Kaznacheev in pro.kafka
Чё про ред панду тут думают?
источник

IK

Ilya Kaznacheev in pro.kafka
Надеюсь, бан не дают за это
источник

S

Slava in pro.kafka
Nigerian Currywurst
Ребят, стоит задача найти на страте приложения сообщение определенного типа в топике с несколькими жсон схемами. Пока только ручное траверсирование сообщений в обратную сторону через декремент офсета приходит в голову
- кодировать вид схемы в ключе
- использовать хедеры
- использовать compacted топики и опять же включать вид схемы в ключ, чтобы сжалось до самого последнего сообщения с этой схемой
источник

VG

Vik Gamov in pro.kafka
Ilya Kaznacheev
Надеюсь, бан не дают за это
Да нет, не должны
источник

NC

Nigerian Currywurst in pro.kafka
Slava
- кодировать вид схемы в ключе
- использовать хедеры
- использовать compacted топики и опять же включать вид схемы в ключ, чтобы сжалось до самого последнего сообщения с этой схемой
Спасибо. От использования хедеров архитекторы по какой-то причине отказались. Я пытался вычислить ублюдка, но никто не знает кто он ;)
источник

NC

Nigerian Currywurst in pro.kafka
Пошел читать за компактед топики
источник

N

Nick in pro.kafka
Nigerian Currywurst
Ребят, стоит задача найти на страте приложения сообщение определенного типа в топике с несколькими жсон схемами. Пока только ручное траверсирование сообщений в обратную сторону через декремент офсета приходит в голову
поставить базу и в нее класть
источник

NC

Nigerian Currywurst in pro.kafka
У меня стейтлесс проект
источник

N

Nick in pro.kafka
щас бы делать стетелесс если нужно работать с состоянием
источник

N

Nick in pro.kafka
или я не понял проблемы
источник

NC

Nigerian Currywurst in pro.kafka
Конфиг для старта в кафке валяется
источник

NC

Nigerian Currywurst in pro.kafka
Продюсят с некоторой переодичностью список товаров - нужно взять самый последний
источник

NC

Nigerian Currywurst in pro.kafka
И использовать его для конфигурации
источник

N

Nick in pro.kafka
Nigerian Currywurst
Продюсят с некоторой переодичностью список товаров - нужно взять самый последний
во, теперь понятно. Еще вопрос количество сообщений в очереди какое примерно и как сильно растет?
источник

NC

Nigerian Currywurst in pro.kafka
Одно в минуту, тру хайлоад
источник

N

Nick in pro.kafka
ну даже одно в минуту это это лям через год
источник

NC

Nigerian Currywurst in pro.kafka
Ретеншн месяц
источник

N

Nick in pro.kafka
а лям уже много
источник