D
Report on spam message was send to admins. Please be patient.
Size: a a a
2020 December 19
b
если машинка\виртуалка с бд валится от нагрузки, то свап на время это не самая плохая идея. А вообще конечно зависит от того что там за базы, возможно сделали бы 2 мастера и распараллеливали бы нагрузку (если там совсем жопа с запросами и структурой бд, ну как под битрикс например какой нибудь).
Я вот перед НГ планирую поднять второго мастера и развернуть репликацию на старый мастер части таблиц, тогда станет намного лучше. Пока что одна ро реплика есть, так что падение мастера не совсем критично.
a6
ну а запись если, лучше уж Patroni тогда
b
ну а запись если, лучше уж Patroni тогда
Ха, а у нас намного проще есть ин-хауз инструмент который собирает/патчит пг и его экстеншоны, делает миграции и скоро научится декларативно указывать репликацию и в какую сторону. И все это на основе nixpkgs.
СБ
Вроде бы oom-killer считает приоритет процессов по количеству памяти, которая высвободится при прибитии процесса.
Я бы влепил node_exporter с '--collector.systemd --collector.processes', натравил на него прометея и смотрел бы на сервер через https://grafana.com/grafana/dashboards/1860. Там каждые 10 секунд тотальный срез по серверу, включая статистику по процессам, iops-ам, прерываниям, коннектам и прочим кишочкам.
Я бы влепил node_exporter с '--collector.systemd --collector.processes', натравил на него прометея и смотрел бы на сервер через https://grafana.com/grafana/dashboards/1860. Там каждые 10 секунд тотальный срез по серверу, включая статистику по процессам, iops-ам, прерываниям, коннектам и прочим кишочкам.
D
Report on spam message was send to admins. Please be patient.
IS
!cпам
D
Report on spam message was send to admins. Please be patient.
b
Вроде бы oom-killer считает приоритет процессов по количеству памяти, которая высвободится при прибитии процесса.
Я бы влепил node_exporter с '--collector.systemd --collector.processes', натравил на него прометея и смотрел бы на сервер через https://grafana.com/grafana/dashboards/1860. Там каждые 10 секунд тотальный срез по серверу, включая статистику по процессам, iops-ам, прерываниям, коннектам и прочим кишочкам.
Я бы влепил node_exporter с '--collector.systemd --collector.processes', натравил на него прометея и смотрел бы на сервер через https://grafana.com/grafana/dashboards/1860. Там каждые 10 секунд тотальный срез по серверу, включая статистику по процессам, iops-ам, прерываниям, коннектам и прочим кишочкам.
Спасибо за совет! А есть такой же экспортер, только для statsd а не для прометея?
А то гуглом находятся всякие читалки /proc/cpu из 3 строчек, но такого всеобъемлющего экспортера как по линку выше не нахожу.
А то гуглом находятся всякие читалки /proc/cpu из 3 строчек, но такого всеобъемлющего экспортера как по линку выше не нахожу.
СБ
Спасибо за совет! А есть такой же экспортер, только для statsd а не для прометея?
А то гуглом находятся всякие читалки /proc/cpu из 3 строчек, но такого всеобъемлющего экспортера как по линку выше не нахожу.
А то гуглом находятся всякие читалки /proc/cpu из 3 строчек, но такого всеобъемлющего экспортера как по линку выше не нахожу.
не знаю, я сторонник полноценного мониторинга.
Есть проблема по-быстрому поднять прометея на время исследования ситуации?
Навскидку в гугле https://eax.me/prometheus-and-grafana/
Есть проблема по-быстрому поднять прометея на время исследования ситуации?
Навскидку в гугле https://eax.me/prometheus-and-grafana/
b
не знаю, я сторонник полноценного мониторинга.
Есть проблема по-быстрому поднять прометея на время исследования ситуации?
Навскидку в гугле https://eax.me/prometheus-and-grafana/
Есть проблема по-быстрому поднять прометея на время исследования ситуации?
Навскидку в гугле https://eax.me/prometheus-and-grafana/
А как прометей собирает счетчики, особенно высокочастотные аналоги statsd.incr? Это получается что на каждой ноде должен быть буфер с метриками, который опустошается после того как прометей сервер его считывает?
b
Ну и прометей нам не очень подходил, тк у нас есть куча айфонов которые просто шлют statsd. Собирать под них клиент прометея, слушать и обстукивать все эти девайсы не очень мне кажется практично.
СБ
А как прометей собирает счетчики, особенно высокочастотные аналоги statsd.incr? Это получается что на каждой ноде должен быть буфер с метриками, который опустошается после того как прометей сервер его считывает?
на каждой ноде стоит node_exporter, который отдельными горутинами опрашивает всякое и кладёт в память, а отдельными отдаёт текущее "итого" из собранного сборщиками. В результате собрать 100500 метрик каждую секунду с каждого сервера оказалось простой задачей.
СБ
Ну и прометей нам не очень подходил, тк у нас есть куча айфонов которые просто шлют statsd. Собирать под них клиент прометея, слушать и обстукивать все эти девайсы не очень мне кажется практично.
Значит ли это, что под разные задачи нельзя использовать разные адекватные задаче решения? Думаю, что нет. Но выбор за Вами.
S
Привет всем. Мне постоянно нужно делать дампы для разрабов чтоб они могли поднять локально проект, в связи с этим есть вопрос: есть ли какой либо интерфейс веб чтоб я создал там юзеров и чтоб каждый раз раб сам скачивал себе дамп базы, а не писал мне?
NA
Привет всем. Мне постоянно нужно делать дампы для разрабов чтоб они могли поднять локально проект, в связи с этим есть вопрос: есть ли какой либо интерфейс веб чтоб я создал там юзеров и чтоб каждый раз раб сам скачивал себе дамп базы, а не писал мне?
Заливай все в s3, а разрабы пускай оттуда качают файл
S
Думал и об ftp (не юзаем aws), но думал может есть веб морда какае-то. Но спасибо за ответ
NA
Думал и об ftp (не юзаем aws), но думал может есть веб морда какае-то. Но спасибо за ответ
FTP тоже пойдёт. Можно набросать быстро скрипт.
Ложишь дамп и делаешь на него ссылку latest.
А программисте скачивают только latest
Ложишь дамп и делаешь на него ссылку latest.
А программисте скачивают только latest
S
Да тоже так думал. Даже уже набросал скрипт. Но перфекционизм не позволяет :)
DS
Думал и об ftp (не юзаем aws), но думал может есть веб морда какае-то. Но спасибо за ответ
снимай дампы и складывай в папочку. С папочки раздавай тем же nginx'ом с влключенным индексом. Зачем ftp - это же издевательство над разработчиками