Size: a a a

2020 December 23

V

Vadim in pro.kafka
хочется ограничить пользователей неймспейсом, и чтобы в них они могли создавать топики
источник

A

Alex in pro.kafka
Vadim
а namespaces  как в докладе у booking  нету в кафке, они сами дописали механизм?
federation/project/service/topic, где
в каком докладе?
источник

V

Vadim in pro.kafka
источник

V

Vadim in pro.kafka
YouTube
Как приручить Apache Kafka? Опыт Booking.com | Александр Миронов, Booking.com
23 января 2020 года провели у нас в офисе митап по Кафке. Это запись одного из докладов с этой встречи. Презентация: http://bit.ly/315Re8Q

Другие видео с митапа: http://bit.ly/2S545nJ

A вот тезисы доклада Александра:
«При всех возможностях Apache Kafka, её непросто интегрировать и поддерживать. В докладе расскажу, как мы решаем эту задачу в Booking.com, где Kafka и выстроенный вокруг неё сервис используются как основной продукт для стриминга данных. Мы в деталях рассмотрим, как сравнительно небольшая команда удерживает контроль над десятками кластеров и обеспечивает безопасность данных, а также вместе посмеёмся — или поплачем — над багами и проблемами, которые нам пришлось решать».

Подпишитесь на канал, соцсети и блоги AvitoTech, чтобы узнавать больше о технологиях Авито 👇🏻
ВК: https://vk.com/avitotech
Фейсбук: https://www.facebook.com/AvitoTech/
Твиттер: https://twitter.com/AvitoTech
Телеграм: https://t.me/avitotech
Хабр: https://habr.com/ru/company/avito/
Медиум (eng): https://medium.com/avitotech
источник

V

Vadim in pro.kafka
жаль этого нет в опенсорсной кафке
источник

V

Vadim in pro.kafka
источник

НИ

Николай Ижиков... in pro.kafka
А где есть?
источник

V

Vadim in pro.kafka
у букинга есть
источник

НИ

Николай Ижиков... in pro.kafka
у них своя сборка?
источник

НИ

Николай Ижиков... in pro.kafka
можешь ссылкой поделиться?
источник

V

Vadim in pro.kafka
шутишь?
источник

V

Vadim in pro.kafka
открой видос
источник

НИ

Николай Ижиков... in pro.kafka
началось)
источник

V

Vadim in pro.kafka
не нравится видео постом выше есть ссылка на текст
источник

V

Vadim in pro.kafka
ссылка на что еще нужна?)
источник

НИ

Николай Ижиков... in pro.kafka
все хорошо, это шутка была. Гляну
источник

VS

V 🏴‍☠️ S in pro.kafka
Vadim
ссылка на что еще нужна?)
В Сибирь
источник

t

terancet in pro.kafka
Народ,

подскажите, пожалуйста, а куда смотреть, что бы разогнать consumer (увеличит throughput) без добавления новых партиций? К сожалению, confluent cloud не умеет добавлять налету новые партиции

Мой кейс следующий: есть consumer, который написан с использованием  spring Kafka binder streams. Он читает из топика, делает конвертацию и делает post request на внешний http. У топика одна партиция.
источник

RZ

Rafa Zubrabubra in pro.kafka
terancet
Народ,

подскажите, пожалуйста, а куда смотреть, что бы разогнать consumer (увеличит throughput) без добавления новых партиций? К сожалению, confluent cloud не умеет добавлять налету новые партиции

Мой кейс следующий: есть consumer, который написан с использованием  spring Kafka binder streams. Он читает из топика, делает конвертацию и делает post request на внешний http. У топика одна партиция.
Сделай ещё один топик с кучей партиций, гони в него, а уже потом делай вюс тяжёлую логику
источник

t

terancet in pro.kafka
Rafa Zubrabubra
Сделай ещё один топик с кучей партиций, гони в него, а уже потом делай вюс тяжёлую логику
Все таки хотелось бы разогнать сам consumer, а потом уже горизонтально скейлиться.
источник