평가자가 제출한 원점수를 조정할 때 선택할 수 있는 통계 방식은 총 3가지가 있습니다.
점수 조정 공통사항
•
조정한 점수가 100점을 초과하면 100점으로 처리합니다.
•
조정한 점수가 0점 미만이면 0점으로 처리합니다.
방식1. 평균/표준편차 일치법
평가자 간 평균과 표준편차를 ‘표준정규분포’를 이용하여 일정하게 조정하는 방법
[ 평균/표준편차 일치법의 장단점 ]
•
장점
평가자가 평가한 피평가자에 대해 특정 개인에 대한 관대화/ 가혹화를 표준편차를 통해 해소할 수 있습니다.
•
단점
모집단에서 점수가 동일한 사람이 많고 1명만 점수가 다를 경우 표준편차 조정으로 원점수보다 큰 폭으로 점수 편차가 크게 왜곡 될 수 있습니다.
[ 계산 공식 ]
(조정평균) + [(평가자 원평가점수 - 평가자평균) / 평가자표준편차)] × (표준편차)
•
조정평균
운영자가 ‘조정공식’ 화면에 입력한 ‘평균’값
•
평가자 원평가점수
평가자가 하위리뷰에서 각 피평가자에게 부여한 점수
•
평가자평균
평가자가 하위리뷰에서 각 피평가자에게 부여한 점수의 평균 값
•
평가자표준편차
평가자가 하위리뷰에서 각 피평가자에게 부여한 점수의 표준편차
•
표준편차
‘조정공식’ 화면에 입력한 ‘표준편차’값
[ 평균/표준편자 일치법 설정 화면 ]
[ 1대1 평가자 예외 조정법 ]
피평가자의 평가자가 1명일 때는 아래와 같이 예외 공식을 적용합니다.
A) ‘평가자 전체 평균’을 선택한 경우
•
공식: 평가자 원평가점수 × ( 전체평균 / 평가대상그룹평균 )
•
평가자 원평가점수
평가자가 하위리뷰에서 각 피평가자에게 부여한 점수
•
전체 평균
전체 평가자의 평균 점수가 자동으로 반영됨
•
평가대상그룹평균
피평가자의 평균 점수를 모두 더한 뒤 1/n 한 값
B) ‘사용자 맞춤’을 선택한 경우
•
공식: 평가자 원평가점수 × ( 조정평균 / 평가대상그룹평균 )
•
평가자 원평가점수: A와 같음
•
조정평균
운영자가 ‘조정공식’ 화면에 입력한 ‘평균’값
•
평가대상그룹평균: A와 같음
방식2. 평균 일치법
평가자 간 평균 점수를 평가자 전체 평균 점수 또는 입력된 평균 점수와 동일하게 조정하는 방법
[ 평균 일치법의 장단점 ]
•
장점
평가자가 평가한 피평가자별 평가점수 성향(순위)이 유지되면서 평가자별 관대화, 가혹화에 따른 평가점수평균을 동일하게 조정하여 평가자 개인별 조직별 평균을 일치하게 되어 공정성을 높일 수 있습니다.
•
단점
평가자가 특정 피평가자에 대해 극단적(관대화, 가혹화)인 평가에 대해 해소 불가능 합니다.
[ 계산 공식 ]
A) ‘평가자 전체 평균’을 선택한 경우
평가자 원평가점수 - 전체평균 / 평가자평균
•
평가자 원평가점수
평가자가 하위리뷰에서 각 피평가자에게 부여한 점수
•
전체평균
전체 평가자 평균 점수
•
평가자평균
평가자별 하위리뷰에서 각 피평가자에게 부여한 점수의 평균 값
B) ‘사용자 맞춤’을 선택한 경우
평가자 원평가점수 - 조정평균 / 평가자평균
•
평가자 원평가점수
평가자가 하위리뷰에서 각 피평가자에게 부여한 점수
•
조정평균
운영자가 ‘조정공식’ 화면에 입력한 ‘평균’값
•
평가자평균
평가자별 하위리뷰에서 각 피평가자에게 부여한 점수의 평균 값
[ 평균 일치법 설정 화면 ]
[ 1대1 평가자 예외 조정법 ]
피평가자의 평가자가 1명일 때는 아래와 같이 예외 공식을 적용합니다.
A) ‘평가자 전체 평균’을 선택한 경우
•
공식: 평가자 원평가점수 × ( 전체평균 / 평가대상그룹평균 )
•
평가자 원평가점수
평가자가 하위리뷰에서 각 피평가자에게 부여한 점수
•
전체 평균
전체 평가자의 평균 점수가 자동으로 반영됨
•
평가대상그룹평균
피평가자의 평균 점수를 모두 더한 뒤 1/n 한 값
B) ‘사용자 맞춤’을 선택한 경우
•
공식: 평가자 원평가점수 × ( 조정평균 / 평가대상그룹평균 )
•
평가자 원평가점수: A와 같음
•
조정평균
운영자가 ‘조정공식’ 화면에 입력한 ‘평균’값
•
평가대상그룹평균: A와 같음
방식3. 최대/최소 점수 제외법
리뷰 받을 사람이 받은 점수 중 최소/최대 값을 제외하고 점수를 조정하는 방법
[ 최대/최소 점수 제외법의 장단점 ]
•
장점
극닥적으로 높거나 낮은 점수를 제외하여 조정할 수 있습니다.
•
단점
평가받은 결과가 3개 이상일 때 적용할 수 있습니다.
[ 계산 공식 ]
•
리뷰 받을 사람이 받은 점수 중 최소/최대 값을 제외하고 계산된 평균 점수
•
피평가자가 받은 평가(제출된 평가)가 3개 미만인 경우 적용하지 않습니다.