node_exporter - сервис, собирающий разные метрики на хосте. Метрик очень много. Но это не суть пока.
Prometheus, в свою очередь, обращается к node_exporter с заданным интервалом, а затем складывает в свою БД все метрики. Там уже с ними можно работать дальше.

Но и это ещё не всё. Можно поставить Grafana, подключить к ней Prometheus и запульнуть в неё шаблон дашбордов - Node Exporter Full. Там даже делать ничего не надо самому.
В графане будут информативные графики на все случаи жизни. Там-то ты можешь и разглядеть проблему.

Еще можно вместо прометуса заббикс юзать, в последних версиях обещали прикрутить экспортеры

Можно. Но я после прометеуса заббикс стороной обхожу.

Почему?

говорят когда у тебя две карты и два сокета, то нужно карты вставить в свои слоты, связанные с numa и привязать очереди соответственно каждому сокету и нума ноде

Почему?

какое улучшение ожидалось увидеть и не было увидено?

Наверное уменьшение softirq

Так и есть. А ещё по наследству мне достался заббикс, который было проще сжечь, чем всё там переделывать. В этот момент род руку попался prometheus.

хммм... вряд-ли это можно было ожидать

Ну по идеи более быстрая обработка прерываний, могла бы уменьшить cpu softirq time

так проходи мимо, раз не понимаешь )

кривущий заббикс по наследству - это боль

а что надо понимать?