AS
Size: a a a
2021 April 11
S
всем привет
а кто сталкивался с таким явлением как cpu overhead в кубере?
подробней об этом здесь
https://www.datadoghq.com/blog/engineering/moving-a-jobsystem-to-kubernetes/
суть в том, что при запуске подов на тачке которой за глаза должно хватать высоконагруженному сервису, получаю то, что сервак потребляет на 15-20% больше цпу, в perf если смотреть то видно что действительно меньшую часть времени занимает работа аппки😑
а кто сталкивался с таким явлением как cpu overhead в кубере?
подробней об этом здесь
https://www.datadoghq.com/blog/engineering/moving-a-jobsystem-to-kubernetes/
суть в том, что при запуске подов на тачке которой за глаза должно хватать высоконагруженному сервису, получаю то, что сервак потребляет на 15-20% больше цпу, в perf если смотреть то видно что действительно меньшую часть времени занимает работа аппки😑
VR
ну вот сразу вопрос к статье - такое поведение точно с ядром не связано ?
всё же разные версии стоят.
всё же разные версии стоят.
S
ядро на нодах 5.4
S
VR
ну в статье 3.х vs 5.х
S
просто складывается впечатление что с этим либо мирятся, либо берут тачки жирнее(что не приемлемо)
S
ну один хрен это и на 5.х всплывает
AS
А причину то нашли?)
AS
Там же инстанцы разные в авсе
AS
И кубер какой, что там на воркере
AS
Самопал или менеджед?
S
менеджед
AS
Какие инстанцы
S
причина - больше всего процессорного времени занимает кубелет, контейнерд и еще какой-то, не под рукой ноут
и только потом уже аппка
почему - неизвестно 😑
и только потом уже аппка
почему - неизвестно 😑
S
m5.large
VR
ну в статье кажется описано - они пофиксили реквесты и немного ускорили обработку "выполненных" задач и полученный результат их устроил.
а у тебя какие цифры VM vs k8s ?
а у тебя какие цифры VM vs k8s ?
S
на обычном ес2 с докер контейнером единственным не больше 40% цпу, в среднем 30-35%
как только смещаем сервис в куб сразу порядка 55-60% при этом еще и латенси аппы возростает(лимиты отключены были)
как только смещаем сервис в куб сразу порядка 55-60% при этом еще и латенси аппы возростает(лимиты отключены были)
VR
диски под кубовыми нодами ssd ?
понять бы - не диск ли виноват.
еще можно контейнеры за-squash-ить
чтобы слоёв в контейнере было мало.
понять бы - не диск ли виноват.
еще можно контейнеры за-squash-ить
чтобы слоёв в контейнере было мало.