A
(напоминаю, у каждого воркера пул свой)
Size: a a a
2020 March 02
T
или препинг юзайте или таймаут правильный настраивайте, не надо обе вещи
ES
и как он возьмет соединение из пула если воркер еще предыдущий ответ не вернул?
Я про это и говорю, 4 воркера * допустим на 10 40 активных сессий - верно ?
T
препинг при нагрузке тормозить будет вам обработку. А таймаут будет срабатывать только без нагрузки
ES
Берем в учет что все заняты
A
Я про это и говорю, 4 воркера * допустим на 10 40 активных сессий - верно ?
что такое "активная сессия" у воркера? 4 воркера с 10 потоками?
A
или у тебя там асинхронщина?
ES
препинг при нагрузке тормозить будет вам обработку. А таймаут будет срабатывать только без нагрузки
Да есть немного деградации
ES
или у тебя там асинхронщина?
Синхронный - по принципу workers = multiprocessing.cpu_count() * 2 + 1
AM
Синхронный - по принципу workers = multiprocessing.cpu_count() * 2 + 1
в gunicorn такая формула на воркеры, у меня 17, я делю пополам еще
ES
в gunicorn такая формула на воркеры, у меня 17, я делю пополам еще
он у меня стоит на входе
AM
он у меня стоит на входе
я пополам делю еще, чтобы не так резво скакал, 8 выходит по одному на ядро
AM
мне вообще кажется, что 1 воркер - одно ядро - оптимально, не самый топчик но уже не однопоточное выполнение
ES
У меня сейчас задача чтоб было максимально стабильно, пусть и не так быстро, возможно действительно надо все усреднить
T
мне вообще кажется, что 1 воркер - одно ядро - оптимально, не самый топчик но уже не однопоточное выполнение
если нет IO - да
DF
Да
ES
если нет IO - да
Очередь поставить и можно уйти от IO даже если он есть, я сейчас так и сделал, у меня CSV генерировалось, отдал в другие приложения обрабатываться и стало лучше
T
чо
T
какую очередь?
A
У меня сейчас задача чтоб было максимально стабильно, пусть и не так быстро, возможно действительно надо все усреднить
TL;DR у пула SQLAlchemy есть встроенный pre_ping, нахрена изобретать велосипед?
размер пула 100 сделан от дилетанства и некомпетентности, потому что автор не понимает как работают пулы.
размер пула 100 сделан от дилетанства и некомпетентности, потому что автор не понимает как работают пулы.