Кафка в кубере. Yay or nay и если да, то какие подводные? (А подводных дофига).
Авторизация. Кафка + kerberos

- Kafka Connect, пример пайплайна, настройка кластера, подводные камни при продуктивном использовании
- Schema registry
- Безопасность (аутентификация, авторизация, шифрование)
Возможно, отдельная секция для разработчиков - Streaming API, ksql.

Было бы здорово увидеть кейсы, в которых Кафка - не лучшее решение, ведь silver bullet, как мы знаем, не бывает

ага, сразу вспоминается как есть такие кейсы с kafka as a storage, что волосы дыбом становятся

Лично мне было бы интересно немного узнать про то, как спроектирована сама кафка, не только про использование ее

Штош, дайте и я свои пять копеек вкину.

как-то непривычно видеть кафку без раздела про Real-time streaming или хотябы овервью возможностей в данном направлении

Класс! Столько хотелок

Sad but then sad again

Меня тоже зовут Женя ), и лично мне было бы интересно пощупать реальные кейсы и практики проектирования ключей для записей таким образом, чтобы получить в итоге параллельную обработку без необходимости разделять общие ресурсы; с этой же точки зрения хотелось бы подробно увидеть реальные кейсы применения чистых функций и Kafka Streams; интерес вызывают compacted-топики и рекомендации по их применению; было бы полезно рассмотреть кооперативный протокол балансировки и как влияет старый протокол на поток обработки. А также хотелось бы получить некие общие/начальные рекомендации по разбиению топиков на партиции, построить мостик в сторону, например, k8s и получить общее представление о пределах и способах масштабирования консьюмеров в k8s. Пардон за, возможно, некоторый сумбур в изложении...

А что за кейсы? Где почитать? )
Это какой-то антипатерн?

ага, есть такой антипаттерн жизненный, что когда у тебя в руках молоток, то все кажется гвоздем

а если серьезно, то есть кейсы когда не знаю как, но толи принципы роботы не досконально изучаются, потом и рождается kafka as a storage, с желанием "infinite retention", со всеми вытекающими

кстати, что-то похожее сделали в https://www.confluent.io/project-metamorphosis

интересно как там биллят

Информация то публичная

Хотелось бы чтобы была информация про семантику exactly-once, но не только со стороны конфига брокера, а так же со стороны клиентской библиотеки (producer), если она отваливается (в этом случае возможен дубликат). А также нет ничего про kstreams.

К дате выхода курса вполне вероятно появится возможность работы Kafka без Zookeeper. Хотелось бы услышать подходы к такой конфигурации и возможные риски.

Вот про внутреннее устройство (ещё и бесплатно):
- https://www.youtube.com/watch?v=A_yUaPARv8U
- https://www.youtube.com/watch?v=zMLfxztAVlo

Спасибо!