Давайте посмотрим скрам гайд, чем должен заниматься СМ и можно попробовать выявить из этого какие-то метрики:
СМ «способствует изменениям, направленным на повышение продуктивности Cкрам-команд»
В вашей команде наверняка есть какие-то метрики, рост, которых вы отслеживаете. Они должны базироваться на основной метрике, как писал Кен Швабер «предоставление наилучшей системы превосходного качества к наиболее подходящей дате». Если эти метрики растут (команда поставляет больше ценности, в более короткие промежутки времени и тд), значит СМ как-то в этом участвовал, и можно задать ему вопросы: «Какие улучшения были в команде? Какие ваши действия повлияли на это?»
СМ «устраняет препятствия, мешающие прогрессу Команды Разработки»
Аналогичные вопросы: «Какие препятствия были в команде? Как решили? Какая ваша роль в этом?»
и этого уже строить оценку