S
Трафик только в 1 сторону
udp?
Size: a a a
2019 December 18
СХ
udp?
Почитай про однонаправленные шлюзы
P
по компьют ресурсам 3 ноды может переварить овердофига, все уткнется в сторадж
ну ёмаё
AZ
всем привет. вопрос - а проект Alluxio вообще живой? Я правильно понимаю что это просто S3 compatible хранилка в памяти? или у нее какие-то еще крутые фичи есть?
очень живой, в этом году был большой релиз
СХ
по компьют ресурсам 3 ноды может переварить овердофига, все уткнется в сторадж
А может в jvm)))
P
по компьют ресурсам 3 ноды может переварить овердофига, все уткнется в сторадж
ок, + ssd
СХ
У меня сообщения были по 20-30 мб, ох как Кафка плакала
СХ
ок, + ssd
Размер сообщения и тип jvm
R
очень живой, в этом году был большой релиз
а в чем плюс использовать его вместо скажем того же dynamodb?
Ну вот есть у меня огромный датасет который я храню в S3. Я могу его в Alluxio залить, а могу в DynamoDB или Aerospike (whatever). По сути вопрос так поставлен - зачем мне in-memory FS если я могу использовать in-memory DB?
Ну вот есть у меня огромный датасет который я храню в S3. Я могу его в Alluxio залить, а могу в DynamoDB или Aerospike (whatever). По сути вопрос так поставлен - зачем мне in-memory FS если я могу использовать in-memory DB?
СХ
На azul jvm Кафка работает куда лучше чем на openjdk
S
Почитай про однонаправленные шлюзы
куча булшита какого то маркетологического по ссылкам
СХ
куча булшита какого то маркетологического по ссылкам
Рубикон однонаправленный шлюз
S
и как он работает?
СХ
и как он работает?
Физический разрыв
AZ
а в чем плюс использовать его вместо скажем того же dynamodb?
Ну вот есть у меня огромный датасет который я храню в S3. Я могу его в Alluxio залить, а могу в DynamoDB или Aerospike (whatever). По сути вопрос так поставлен - зачем мне in-memory FS если я могу использовать in-memory DB?
Ну вот есть у меня огромный датасет который я храню в S3. Я могу его в Alluxio залить, а могу в DynamoDB или Aerospike (whatever). По сути вопрос так поставлен - зачем мне in-memory FS если я могу использовать in-memory DB?
прозрачность для приложений, тебе не надо явно поднимать данные в базу (и придумывать сериализацию/формат хранения) - ты просто обращаешься по другой схеме (alluxio://) и он поднимает данные в кэш если их там нет
S
Физический разрыв
как он работает?
S
что такое физический разрыв? на каком уровне протокола?
R
прозрачность для приложений, тебе не надо явно поднимать данные в базу (и придумывать сериализацию/формат хранения) - ты просто обращаешься по другой схеме (alluxio://) и он поднимает данные в кэш если их там нет
ага, уловил идею. попробуем поиграться тогда, мб что и выгорит
UD
ибо через куб карты и на 25% не нагрузить было
Шта
AZ
а в чем плюс использовать его вместо скажем того же dynamodb?
Ну вот есть у меня огромный датасет который я храню в S3. Я могу его в Alluxio залить, а могу в DynamoDB или Aerospike (whatever). По сути вопрос так поставлен - зачем мне in-memory FS если я могу использовать in-memory DB?
Ну вот есть у меня огромный датасет который я храню в S3. Я могу его в Alluxio залить, а могу в DynamoDB или Aerospike (whatever). По сути вопрос так поставлен - зачем мне in-memory FS если я могу использовать in-memory DB?
плюс они в самом последнем релизе побежали с дремио и прочими конкурировать - теперь они кэшируют структурированную информацию и метадата каталог