AU
Но для всех внутренних это может оказаться не реалистично
Size: a a a
2019 November 19
AU
Можно ли сказать какому-то топику типа «ты живешь только на таком-то раке»?
A
Можно ли сказать какому-то топику типа «ты живешь только на таком-то раке»?
Да, после алокации топик не меняет самостоятельно на какой машинке он живёт
AU
Я просто не особо понимаю если там пачка из, скажем, 10 стримов у которых есть свои сторы, то получим ещё 10-20 технических топиков (зависит от топологий но типа того).
И при падении ДЦ у них произойдёт рандомное падение как я понял.
И при падении ДЦ у них произойдёт рандомное падение как я понял.
AU
И вот даже если включить unclean election у них то ведь там будет микс состояний и не консистентностей
AU
И как это разруливать не ясно...
Я не прав?
Я не прав?
GM
И как это разруливать не ясно...
Я не прав?
Я не прав?
как не ясно? есть конфлюент контрол центр, у линкедина есть кондуктор и тд
AU
Технически что сделать чтоб переассайнить партишн это простой вопрос.
AU
Сложный - в каком состоянии окажется система?
AU
Если в каскаде стрим процессоров мы на разных этапах это сделаем
AU
Например на первом шаге анклин, а на втором все ок
SK
👋 есть ли те , кто используют Kafka по умолчанию и/+ Airflow ?
AU
у нас не было airflow…
GG
Эйрфлоу при наличии кафки выглядит сомнительной штукой
AU
А есть гайданс к размеру топологии Кафка Стрима?
То есть по каким критериям составить баланс между:
1) Каскад из n топологий, передающих данные между собой через промежуточные топики. Топологии запущены под разными контейнерами в облаке, общение через кафку.
2) Единая топология, которая делает то же самое внутри себя
Где лучше одно, где другое, какие параметры выбора?
То есть по каким критериям составить баланс между:
1) Каскад из n топологий, передающих данные между собой через промежуточные топики. Топологии запущены под разными контейнерами в облаке, общение через кафку.
2) Единая топология, которая делает то же самое внутри себя
Где лучше одно, где другое, какие параметры выбора?
VG
как не ясно? есть конфлюент контрол центр, у линкедина есть кондуктор и тд
Кондуктор делает Стефан мареек
GM
Кондуктор делает Стефан мареек
точно, я с круиз контролем перепутал
VG
точно, я с круиз контролем перепутал
Он!