p
У меня в рабочих задачах (обработка кучи данных, примерно 50-150 млрд циклов) порой падает производительность на ровном месте под конец) ни с чем не связано больше
Звучит довольно абстрактно
Size: a a a
2020 April 11
p
+там такие особенности, что логика там не сильно сложная, но надо обработать млн запросов в сутки. Из них выпупается нашими рекламодателями ну может 0.01%, так что надо научиться максимально дешево (по цпу, памяти) обрабатывать каждый запрос
Так 1 млн в сутки - это ж 12 запросов в секунду
EK
есть тут кто пользовался https://github.com/cheggaaa/pb ?
X
есть тут кто пользовался https://github.com/cheggaaa/pb ?
ага
EK
почему вот тут весь прогресс печатается сразу? https://play.golang.org/p/e4z070ShFel я же вроде буфер использую в 10 кб
EK
не, все работает))
EK
просто для теста файл маленький брал
VS
Было 40-50 млн
50 млн в сутки это по прежнему 600 запросов в секунду. И обычно если приводят метрику суточную, предполагается что она равномерная, иначе в ней смысла ноль
VS
ну я не помню сколько было в секунду
Для рекламных систем в ртб части легко может быть несколько десятков тысяч на одной железке или даже больше
p
50 млн в сутки это по прежнему 600 запросов в секунду. И обычно если приводят метрику суточную, предполагается что она равномерная, иначе в ней смысла ноль
Вот да.
ВС
а профайлер будет отображать в реальном времени процесс запущенной программы? просто не могу понять, почему-то после запуска через 2-3 минуты начинает тормозить, и с каждой минутой все медленнее и медленнее, но не могу понять в чём проблема
да, pprof доступен по http
AP
профайлер поможет?
Да. Профиль cpu снимается не моментом а какое то время (по дефолту 30сек)