Size: a a a

Scalability Camp — распределенные системы и HPC

2021 December 23

S

Slach in Scalability Camp — распределенные системы и HPC
свиньон это а не савиньон =)

вот кстати,  а кто как относится к идее менять архитектуру оркестраторов?
что мне не нравится в текущем kubernetes

большие накладные расходы на apiserver
etcd и raft протокол не дающий нормально жить в  geo-distirbuted

мнимая декларативность разбивающаяся о конфликтующие statefull изменения реального мира

хочется взять redpanda вместо etcd
убрать централизованный api-server
вместо него оставить только kubelet с какой то одной CRI и CSI
и который просто будет вычитывать события из redpanda
и писать события в него же

на выходе имеем 100% observability и еще и наверное какую нибудь стратегию "одно изменение за раз" можно реализовать

что думаете на счет идеи?
источник

N

Nikolay in Scalability Camp — распределенные системы и HPC
" redpanda вместо etcd" это не Calvin?
источник

ZO

Zlata Obukhovskaya in Scalability Camp — распределенные системы и HPC
А можешь подробнее описать кейс, где нужно оркестировать две локации одним оркестатором?
источник

S

Slach in Scalability Camp — распределенные системы и HPC
redpanda это C++ быстрая имплементация kafka
источник

S

Slach in Scalability Camp — распределенные системы и HPC
да как бы в любой гео-распределенной системе хочется иметь общий control plane
ну хотя бы центральный, но с федерацией

хотя бы чтобы для canary deployment не приходилось городить отдельные инструменты типа https://github.com/bookingcom/shipper

и без постоянного поллинга который ничего кроме повышения rps не делает
источник

S

Slach in Scalability Camp — распределенные системы и HPC
то есть текущий кубер "как то работает"
но блин ценой 5-7% ресурсов cluster wide это получается достичь
источник

N

Nikolay in Scalability Camp — распределенные системы и HPC
я cкорее про то, что redpanda вместо etcd это выглядит как sequencer в Calvin. мне показалось, что у вас идея не использовать raft нежду DC http://cs.yale.edu/homes/thomson/publications/calvin-sigmod12.pdf
источник

N

Nikolay in Scalability Camp — распределенные системы и HPC
источник

S

Slach in Scalability Camp — распределенные системы и HPC
а блин, я тупанул да =( redpanda тоже с raft

=( короче нужен какой то механизм "записал и забыл"->"читаю из места где жду результат"
и "прочитал" -> "записал результат и породил другие события" ->"сдвинул offset в топике"

как то так
источник
2022 January 01

ZO

Zlata Obukhovskaya in Scalability Camp — распределенные системы и HPC
С новым годом, распределенные инженеры!
источник

TS

Timur Safin in Scalability Camp — распределенные системы и HPC
источник

N

Nikolay in Scalability Camp — распределенные системы и HPC
источник

ST

Storm Trooper in Scalability Camp — распределенные системы и HPC
источник
2022 January 05

AB

Aleksandr Borgardt in Scalability Camp — распределенные системы и HPC
источник

AB

Aleksandr Borgardt in Scalability Camp — распределенные системы и HPC
источник

JS

Jerzy Syrowiecki in Scalability Camp — распределенные системы и HPC
бан просит
источник
2022 January 10

SG

Soila Goff in Scalability Camp — распределенные системы и HPC
2
источник

SG

Soila Goff in Scalability Camp — распределенные системы и HPC
2
источник

SG

Soila Goff in Scalability Camp — распределенные системы и HPC
2
источник

SG

Soila Goff in Scalability Camp — распределенные системы и HPC
2
источник