АС
т.е полностью останавливается весь прод во время деплоя?
нет, сервера по очереди
Size: a a a
2020 November 09
SZ
нет, сервера по очереди
погодь. серверов сколько? 1 с 300 процессами, или N x 300?
АС
погодь. серверов сколько? 1 с 300 процессами, или N x 300?
ну сейчас 6 боевых по 300 процессов
DT
чувствую кто-то сегодня пойдет kubernetes кластер на bare-metal поднимать, уговорит же)
SZ
чувствую кто-то сегодня пойдет kubernetes кластер на bare-metal поднимать, уговорит же)
не, просто ностальгирую по былой боли)
АС
300 число условное
разные консьюмеры, разное количество
разные консьюмеры, разное количество
АС
но примерно по 300 воркеров, да
АС
я не утверждаю, что это всё идеально
АС
но оно работает
АС
и достаточно гибко
АС
без всяких кубиков
SZ
ну т.е конфиг условно
node.1:
consumer-type-1 5
consumer-type-2 250
node.2:
consumer-type-1 25
node.3:
consumer-type-3 300
и так все 6 нод описаны
node.1:
consumer-type-1 5
consumer-type-2 250
node.2:
consumer-type-1 25
node.3:
consumer-type-3 300
и так все 6 нод описаны
АС
ну т.е конфиг условно
node.1:
consumer-type-1 5
consumer-type-2 250
node.2:
consumer-type-1 25
node.3:
consumer-type-3 300
и так все 6 нод описаны
node.1:
consumer-type-1 5
consumer-type-2 250
node.2:
consumer-type-1 25
node.3:
consumer-type-3 300
и так все 6 нод описаны
они все одинаковые
SZ
а гитлаб идет по ssh на каждый и делает релоад и обновляет сетап сервисов, так?
АС
один конфиг разливается на все
АС
а гитлаб идет по ssh на каждый и делает релоад и обновляет сетап сервисов, так?
идет по очереди на каждый, останавливает воркеры, убеждается, что остановились, деплоит, релоад, рестарт, 5 минут наблюдения за логами на предмет критикал, следующий
SZ
угу, понял
SZ
6 нод всегда работают, даже ночью и на выходных?
АС
6 нод всегда работают, даже ночью и на выходных?
да
мы примерно всегда знаем объем работы
мы примерно всегда знаем объем работы
SZ
спот инстансы юзаете?