종합 점수 조정 (캘리브레이션)
•
‘종합 점수/등급 산출’ 단계가 있는 리뷰일 때 선택할 수 있습니다.
•
종합 점수 조정은 평가자가 제출한 답변을 기반으로 환산된 총 점수(원점수)에 통계 기반의 ‘조정 공식’을 적용하여 ‘자동 조정’된 종합 점수를 산출합니다.
종합 점수 조정 설정 화면
❶ 그룹명을 설정할 수 있습니다. 그룹명은 그룹이 구분된 목적이나 역할에 따라 알기 쉽게 설정하는 것이 좋습니다.
❷ 그룹에 적용될 조정 공식을 설정해 주세요.
❸ 설정된 그룹에 적용할 하위 리뷰를 추가합니다.
❹ [+ 종합 점수 조정 그룹] 버튼을 누르면 새로운 그룹을 추가할 수 있습니다.
조정 공식
조정 방식은 총 3가지로 옵션이 마련되어 있습니다.
필요한 설정에 맞춰서 원하는 방식을 선택해 주세요!
1. 평균/표준편차 일치법
평가자마다 점수를 주는 기준이 달라 공정한 평가가 어려울 수 있습니다.
평균/표준편차 일치법은 모든 평가자의 점수 분포를 표준화하여 평가자 간 차이를 줄이는 방식입니다. 이를 통해 점수의 공정성을 높이고, 피평가자에 대한 평가 결과를 더 신뢰할 수 있도록 조정합니다.
예외케이스) 1:1 평가자 예외 조정법
평가자가 1명일 때 적용되는 특별한 조정 방식입니다.
전체 평가자의 평균을 기준으로 점수 조정하는 평가자 전체 평균
관리자가 설정한 조정평균을 기준으로 점수 조정하는 사용자 맞춤형 중 선택합니다.
2. 평균 일치법
평균 일치법은 평가자들이 평가한 점수의 평균을 일정하게 맞추는 방법입니다.
이를 통해 평가자 간 점수 차이를 최소화하고, 각 평가자의 점수 분포를 일정하게 유지할 수 있습니다.이 방식은 평가자별로 관대하거나 가혹한 경향을 줄여 보다 공정한 평가 환경을 만들어줍니다.
예외케이스) 1:1 평가자 예외 조정법
평가자가 1명일 때 적용되는 특별한 조정 방식입니다.
전체 평가자의 평균을 기준으로 점수 조정하는 평가자 전체 평균
관리자가 설정한 조정평균을 기준으로 점수 조정하는 사용자 맞춤형 중 선택합니다.
3. 최대/최소 점수 제외법
피평가자가 받은 점수 중 가장 높은 점수와 가장 낮은 점수를 제외하고, 나머지 점수만으로 평균을 계산하는 방법입니다.
이를 통해 과도하게 높거나 낮은 점수의 영향을 줄여, 평가의 신뢰성을 높일 수 있습니다.
