ST
У меня дев кластер. Куча приложений которые хотят ресурсы, но используют их пиково, то есть скачками. Если занизить реквесты и лимиты, контейнер тротлит и хелс чеки валятся.
можно начать вылизывать производительность под конкретные рамки
Size: a a a
2020 September 26
ST
лимиты выше имеющихся мощностей ставить = не ставить лимиты вообще
L
не факт. теория массового обслуживания нам намекает
L
что можно сделать оверселлинг
VK
пода. конечно не найдет.
но вопрос то ты какой задавал ?
но вопрос то ты какой задавал ?
Ок. Найдет ли контроллер где запустить под, если сумма лимитов уже запущенных подов равно вместимости кластера
L
хотя... если по лимиты выставлять равным реквестам и при этом чтобы все влезло.
и утебя хелсчеки начинают фейлится....
это одно из двух - или баг в ядре и тротлинг наступает раньше чем надо. или ты уже слишком перегрузил кластер и пора добавить пару железок
и утебя хелсчеки начинают фейлится....
это одно из двух - или баг в ядре и тротлинг наступает раньше чем надо. или ты уже слишком перегрузил кластер и пора добавить пару железок
L
Ок. Найдет ли контроллер где запустить под, если сумма лимитов уже запущенных подов равно вместимости кластера
шедулер смотрит только на реквесты.
лимиты ему без разницы. на лимиты смотрит кублет, когда передает их докеру для ограничения контейнера
лимиты ему без разницы. на лимиты смотрит кублет, когда передает их докеру для ограничения контейнера
VK
хотя... если по лимиты выставлять равным реквестам и при этом чтобы все влезло.
и утебя хелсчеки начинают фейлится....
это одно из двух - или баг в ядре и тротлинг наступает раньше чем надо. или ты уже слишком перегрузил кластер и пора добавить пару железок
и утебя хелсчеки начинают фейлится....
это одно из двух - или баг в ядре и тротлинг наступает раньше чем надо. или ты уже слишком перегрузил кластер и пора добавить пару железок
Да не. Я вот запускаю реббит, даю ему 400м, у него рединес не проходят и все. Даю 800м скажем. Все ок. Но ему столько не надо, он по факту 200-300 от силы кушает
L
Да не. Я вот запускаю реббит, даю ему 400м, у него рединес не проходят и все. Даю 800м скажем. Все ок. Но ему столько не надо, он по факту 200-300 от силы кушает
и что ты чекаешь в пробе ?
насколько я помню там rabbitmqctl status вызывается
насколько я помню там rabbitmqctl status вызывается
VK
и что ты чекаешь в пробе ?
насколько я помню там rabbitmqctl status вызывается
насколько я помню там rabbitmqctl status вызывается
А фиг знает) я просто взял хелм чарт ha
L
А фиг знает) я просто взял хелм чарт ha
лень в манифест заглянуть ?
VK
лень в манифест заглянуть ?
readinessProbe:
exec:
command:
- /bin/sh
- -c
- 'timeout 3 wget -O - -q --header "Authorization: Basic `echo -n \"$RABBIT_MANAGEMENT_USER:$RABBIT_MANAGEMENT_PASSWORD\"
| base64`" http://127.0.0.1:15672/api/healthchecks/node | grep -qF "{\"status\":\"ok\"}"
livenessProbe:
exec:
command:
- /bin/sh
- -c
- 'timeout 5 wget -O - -q --header "Authorization: Basic `echo -n \"$RABBIT_MANAGEMENT_USER:$RABBIT_MANAGEMENT_PASSWORD\"
| base64`" http://127.0.0.1:15672/api/healthchecks/node | grep -qF "{\"status\":\"ok\"}"'
VK
Вот какая ситуация по ресурсам
AS
Проверь по порядку свой sysctl и ulimits
AS
ulimitsNofiles
AS
Rabbitmqctl еще больший спайк вызовет, его выпилили, но лимиты проверь, вдруг там 1000 стоит
AS
+ Поставь tuned и профиль какой-нибудь релевантный
EP
Такая же дичь, видимо метрики не айс в пром-операторе или надо разбираться, у меня в кластере CPU usage точно не 4%