Search

리뷰는 어떤 단계로 진행되나요?

요약 보기

리뷰 성격에 맞게 진행 단계를 자유롭게 구성해보세요!
리뷰는 최대 4단계로 진행할 수 있습니다.
리뷰 결과에 꼭 필요한 ‘리뷰 작성’은 필수 단계이며, 나머지 단계는 선택할 수 있습니다.
진행 단계
단계별
1. 리뷰 작성
필수 단계 | 평가자가 리뷰를 작성하고 제출합니다.
2. 리뷰 답변 조정
선택 단계 | 등급형 문항의 제출결과를 조정자가 조정합니다.
3. 종합 점수/등급 산출
선택 단계 | 평가자가 제출한 답변을 기반으로 총 점수와 종합 등급이 나옵니다.
4. 종합 등급 조정
선택 단계 | 3번 단계에서 산출된 종합 등급을 조정자가 조정합니다.

1. 리뷰 작성 (필수단계)

리뷰 작성자(평가자)가 리뷰를 작성하고 제출하는 단계입니다.
리뷰 진행을 위해 항상 포함되어 있는 필수 단계입니다.
리뷰 작성 단계만 있는 리뷰 결과는 어떻게 보이나요?

2. 리뷰 답변 조정 (선택 단계)

리뷰 작성자가 제출한 내용을 검토하고 조정(캘리브레이션) 합니다.
등급형(점수형) 문항만 조정할 수 있습니다.
단, 리뷰 작성자가 조정에 참여할 때는 본인이 제출한 서술형 문항도 수정할 수 있습니다.
조정한 리뷰 답변은 어떻게 보이나요?

3. 종합 점수/등급 산출 (선택 단계)

이 단계가 포함된 리뷰는 리뷰 작성자가 제출한 답변을 기반으로 종합 점수가 자동 계산됩니다.
종합 점수는 미리 정해놓은 등급 기준에 맞게 ‘종합 등급’으로 환산됩니다.
종합 등급 기준과 산출 공식 만들기
종합 점수/등급 결과는 어떻게 보이나요?

4. 종합 등급 조정 (선택 단계)

종합 등급 산출 단계가 있는 리뷰일때 선택할 수 있습니다.
산출된 종합 등급을 검토하고 조정(캘리브레이션) 합니다.
조정한 종합 등급의 결과는 어떻게 보이나요?

4-1 [종합 등급 조정 그룹] 이란?

종합 등급 조정을 할 때 기준이 되는 단위예요.
그룹별로 리뷰 받을 사람, 조정자, 등급별 정원을 설정할 수 있습니다.
조정은 최대 2차까지 운영할 수 있으며, 각 차수마다 별도의 그룹을 만들 수 있습니다.
 종합 등급 조정 그룹 설정 방법
(1) 조정 차수 선택하기
조정 단계는 최대 2차까지 운영할 수 있습니다.
화면 상단에 조정 1차 / 조정 2차 탭이 표시되며, 그룹을 만든 차수만 진행됩니다.
예: 2차 그룹을 만들지 않으면 1차 조정만 진행 및 결과가 최종 확정
(2) 그룹명 수정하기
수정( ) 버튼을 클릭해 원하는 이름으로 변경할 수 있습니다.
(3) 리뷰 받을 사람 설정
해당 그룹에서 조정할 피평가자를 지정합니다.
상위 리뷰의 모든 피평가자는 반드시 1개의 그룹에 포함되어야 합니다.
(4) 조정 참여자 설정
그룹별로 조정에 참여할 담당자를 지정합니다.
각 그룹에는 최소 1명 이상의 조정 참여자가 필요합니다.
(5) 조정 내용 열람자 설정
각 그룹의 조정 결과를 함께 열람할 담당자를 지정합니다.
열람자로 지정된 구성원은 조정 진행 중인 등급, 코멘트, 정원 현황 등을 함께 확인할 수 있습니다.
단, 조정 참여자는 수정 가능, 조정 내용 열람자는 보기만 가능합니다.
조정 그룹별로 서로 다른 열람자를 지정할 수 있으며, 필요 시 여러 명을 동시에 추가할 수도 있습니다
조정 내용 열람자는 선택 옵션(필수 아님) 으로, 필요 시 추가하지 않아도 됩니다.
(6) 등급별 정원 설정
그룹별로 각 등급에 배정할 수 있는 최대 인원을 설정합니다.
‘제한 없음’으로 두거나, 특정 숫자를 지정할 수 있습니다.
조정자는 조정 화면에서 현재 인원 / 정원 현황을 보며 조정할 수 있습니다.
(7) [+ 종합 등급 조정 그룹] 버튼
새로운 그룹을 추가할 수 있습니다.