Раз в месяц пишу для руководства отчёт о работе отдела, и премия (моя, в частности) от итогов последующего обсуждения зависит. Самый напряжный для меня день в месяце.
А должно ли оно быть таким -- по расписанию? Думаю, да. Помогает руководству держать руку на пульсе и меньше переживать за отдел. Потом ещё серии этих отчётов можно анализировать ретроспективно и выявлять тенденции.
По совокупности факторов (их немало). Изучаю все видимые артефакты работы, вспоминаю невидимые. В итоге даю количественную оценку эффективности работы отдельных сотрудников (баллы от 1 до 10) и отдела в целом (= оценка меня).
Этой системой я не очень доволен и пытаюсь её улучшать -- регулярно что-то подкручиваю.
Например, чтобы видеть тенденции -- и у отдельных сотрудников, и у отдела в целом. Если видим отрицательные тенденции (особенно долгосрочные), думаем, какие принять меры.
Субъективность можно снизить кросс-валидацией. Мой начальник независимо даёт те же оценки, но по более грубой методике, и мы их сравниваем. Обычно они +- сходятся, но когда не сходятся, мы это обсуждаем.
Любая система годится, если будет ответ на вопрос «почему ему премию, а мне куй?» Субъективная она или нет, это уже пусть бойцы за справедливость думают, у руководителя не эта задача.