AZ
как раз сильнее стали дружить с помянутым сегодня престо 🙂
Size: a a a
2019 December 18
СХ
что такое физический разрыв? на каком уровне протокола?
на уровне железа, можно сказать убирают на преобразователи обратный трафик, говоря клиенту спереди, что типа дошло
N
что такое физический разрыв? на каком уровне протокола?
GP
У меня сообщения были по 20-30 мб, ох как Кафка плакала
Так зачем такие большие сообщения; ещё бы по гигабайту слал
AS
Так зачем такие большие сообщения; ещё бы по гигабайту слал
прямо как в анекдоте про бензопилу и русских мужиков с рельсом
AZ
да там просто кейс такой что решили не усложнять, видимо архитектор также любит кафку как и кубер 🙂
GP
мучает ещё вопрос; а это с дефлейтом в авро формате или без обычным жейсоном
A
В csv
A
А вообще если помню правильно они там айдио файлы гоняли, так как не хотели сохранять в s3 и слать мету, типо кому-то же придётся потом и удалять в этом s3
AZ
А вообще если помню правильно они там айдио файлы гоняли, так как не хотели сохранять в s3 и слать мету, типо кому-то же придётся потом и удалять в этом s3
кошмар какая сложность 🙂
СХ
Так зачем такие большие сообщения; ещё бы по гигабайту слал
не я архитектуру в этом плане придумывал, ну там просто были большие обьёмы инфы, а поделить не могли(точнее могли но на тот момент надо было делать опытный образец и потому было не до такого)
ME
кошмар какая сложность 🙂
главное про ttl не рассказывать:)
А
Подскажите, для чего нужны партиции в кафке? Для увеличения пропускной способности или есть какие-то другие логические причины?
GP
Подскажите, для чего нужны партиции в кафке? Для увеличения пропускной способности или есть какие-то другие логические причины?
‘Парелелишь топик’; он разбит по разным брокерам (по партициям); и консумеры могут читать из кафки параллельно; каждый свою партицию топика
AS
Подскажите, для чего нужны партиции в кафке? Для увеличения пропускной способности или есть какие-то другие логические причины?
Там еще важно как пишите консистентно или нет тем самым достигается выбор между C или.A из CAP
AS
Если один источник всегда пишется в одну партицию это C
Е
Подскажите, для чего нужны партиции в кафке? Для увеличения пропускной способности или есть какие-то другие логические причины?
без них было бы не так весело
AS
Если в любую доступную партицию это A
S
Подскажите, для чего нужны партиции в кафке? Для увеличения пропускной способности или есть какие-то другие логические причины?
это основная сущность хранения