Rating이 무엇인가?
Rating은 리뷰 시 점수 또는 등급을 매기는 것이며, 아래 두 가지 방식이 있습니다.
•
각 리뷰 문항마다 점수를 매기는 것
•
리뷰 결과를 바탕으로 구성원의 최종 등급을 매기는 것
Rating이 유용한 이유
•
성과와 역량 수준을 명확하게 표현할 수 있습니다.
Rating을 하면 그 수준이 어느 정도인지 명확하게 알 수 있습니다. 예를 들어 리더십 역량에 대해 코멘트만 작성하기보다는 점수를 주고 그 이유를 작성할 때 더 명확한 의사 표현이 가능합니다.
•
회사 입장에선 정량적인 분석이 가능합니다.
정량화된 결과를 통해 특정 구성원의 성장 추이나 다른 구성원들과의 상대적인 비교 분석이 가능해집니다. 또한 누가 고성과자이고 저성과자인지 파악하기 쉽기 때문에 보상과 연계된 평가가 용이합니다.
Rating 운영의 문제점과 보완책
몇 가지 문제점도 존재합니다.
1.
낮은 점수를 받은 사람들은 스트레스를 받고 성과가 더 악화되는 경우가 있습니다. 구성원의 성과 개선은 Rating으로 하는 것이 아니라 건설적인 피드백을 통해 해야 합니다.
2.
편향 오류(ex. 최신 효과, 중앙 집중 경향 등)를 일으킬 수 있으며, 이에 따라 객관적인 Rating이 어렵습니다.
위의 문제를 보완하는 방법은 다음과 같습니다.
1.
사람에 대한 평가가 아닌 특정 기간 중의 성과에 대한 평가를 해야 합니다. 그리고 이에 대해 구성원들과 잘 소통해야 합니다. 저성과자들에겐 건설적인 피드백과 더불어 성과가 개선될 수 있음을 알려주세요.
2.
캘리브레이션(조정) 절차를 진행합니다. 일반적으로 리더들이 모여 편향되게 부여된 등급은 없는지 조정하는 회의를 거칩니다. 이 과정을 통해 평가의 공정성에 대한 신뢰도가 높아집니다. 특히 구글에서는 편향 방지를 위한 가이드(아래 표)를 바탕으로 캘리브레이션 회의를 시작한다고 하는데요. 이 방식을 시도해보시길 권장합니다.
편향 방지표
인지 편향 - 집단 역학
•
뿔 효과와 후광 효과 어떤 사람에 대한 전반적인 인상이 매우 고약하거나 매우 훌륭할 때 여기에 휘둘려 그 사람에 대한 정확한 판단을 하기 힘들어진다.
•
최신 효과 어떤 사람이 최근에 했던 일이 기억에 강하게 남아 그 사람을 있는 그대로 정확하게 평가하지 못한다.
•
근본 속성 오류 어떤 사람을 평가할 때 그 사람의 '능력'에 지나치게 집중하는 바람에 그 사람의 성과에 영향을 미친 상황이나 맥락을 충분히 고려하지 않는다. 혹은 그 반대의 경우도 마찬가지다.
•
중앙 집중 경향 판정을 내리는 사람은 아주 좋은 평점이나 아주 나쁜 평점을 피하려는 경향이 있다.
•
유용성 편향 실제로 타당한 자료보다는 쉽게 동원할 수 있는 정보를 토대로 결정을 내린다.
Rating 척도 설정 방법
몇 점 척도인지, 척도에 대한 범주를 어떻게 제시할 것인지에 따라 효과가 달라집니다.
몇 점 척도를 사용할 것인가
•
일반적으로 5점 척도를 사용합니다
•
단순하게 구분하고 싶다면 3점 척도를, 세밀한 구분이 필요하다면 7점 척도를 사용하세요.
•
중앙값에 치중되는 것을 방지하고 싶다면 4점 척도를 사용하세요.
어떤 범주를 제시할 것인가
Rating을 할 땐, 점수에 해당하는 범주를 제시해주어야 합니다.
(1) 일반적으로 Meet Expectations 척도를 사용합니다.
Q. 얼마나 목표 달성을 잘 했나요?
1.
기대에 못 미침 (Does not meet expectations)
2.
일부 기대에 부응함 (Meets some expectations)
3.
모든 기대에 부응함 (Meets All Expectations)
4.
기대 이상의 성과를 보임 (Exceeds Expectations)
5.
기대를 매우 초과함 (Greatly Exceeds Expectations)
(2) 고성과자를 선별하고 싶다면 Above Average 척도를 사용하세요. 중앙값이 평균 이상 수준이 되는 척도이며, 점수를 후하게 주는 경향을 방지하는 효과도 있습니다.
Q. 얼마나 목표 달성을 잘 했나요?
1.
개선이 필요함 (needs improvement)
2.
기대를 꾸준히 충족함(consistently meets expectations)
3.
기대를 초과함 (exceeds expectations)
4.
기대를 크게 초과함 (strongly exceeds expectations)
5.
매우 탁월함 (superb)
(3) 대인관계 등과 같이 소프트 스킬을 리뷰하고 싶다면, Observation 척도를 사용하세요. 행동의 빈도를 파악하는 것이 필요하기 때문입니다.
Q. 큰 압박이 있는 상황에서도 리더십을 보여준다
1점: 그런 모습을 본 적이 없다 (Not observed)
2점: 드물게 그런 모습을 보인다 (Rarely observed)
3점: 종종 그런 모습을 보인다 (Observed)
4점: 항상 그런 모습을 보인다 (Consistently observed)
