같은 성과를 냈는데 A팀장에게는 A등급을, B팀장에게는 B등급을 받았다면 구성원은 평가를 어떻게 받아들일까요. 평가자마다 후한 정도가 다른 문제는 평가 양식을 고치는 것만으로 해결되지 않습니다. 평가자들이 한자리에 모여 기준을 맞춰 보는 과정이 필요하고 그 회의가 바로 캘리브레이션입니다.
이 글은 캘리브레이션의 뜻을 설명한 뒤 연구에서 확인된 효과와 한계를 살펴봅니다. 이어서 바로 쓸 수 있는 90분 회의 안건과 진행자 질문, 회의가 왜곡되는 순간과 대처법을 정리했습니다.
핵심 요약 • 인사평가 캘리브레이션은 평가자들이 1차 등급과 근거를 비교해 같은 기준을 적용했는지 확인하고 필요하면 조정하는 회의입니다. • 연구에 따르면 평가자 간 일관성을 높이고 관대화를 줄이지만 등급이 중간으로 쏠리는 부작용도 함께 나타났습니다. • 모든 구성원을 논의하기보다 등급 분포가 튀는 평가자, 최고·최저 등급, 등급 경계에 있는 사례부터 다루는 편이 효율적입니다. • 등급을 바꿀 때는 근거와 사유를 기록해 평가자에게 돌려줘야 면담과 다음 평가에 쓸 수 있습니다.
인사평가 캘리브레이션이란
인사평가 캘리브레이션(calibration)은 평가자들이 모여 각자 매긴 1차 등급과 그 근거를 비교하고 같은 기준이 적용됐는지 확인해 필요한 경우 등급을 조정하는 절차입니다. 영어 calibration은 원래 측정 도구의 눈금을 맞춘다는 뜻인데, 인사평가에서는 평가자들의 '눈금'을 맞추는 일을 가리킵니다.
회사에 따라 평가 조정 회의, 등급 보정 회의라고도 부릅니다. 보통 조직장들과 그 상위 리더가 참석하고 HR이 진행을 맡습니다.
비슷해 보이는 제도와의 차이
| 구분 | 무엇을 하나 | 언제 하나 |
| 캘리브레이션 | 평가자들이 등급의 근거를 비교해 기준을 맞추고 필요하면 조정 | 1차 평가 후, 결과 공개 전 |
| 강제 배분(상대평가) | 등급별 인원 비율을 미리 정해 그 안에 배분 | 등급 확정 시 |
| 평가자 교육 | 등급 정의와 평가 오류를 익히고 사례로 연습 | 평가 시작 전 |
캘리브레이션과 강제 배분은 함께 운영되기도 하지만 같은 제도는 아닙니다. 절대평가를 쓰는 회사도 평가자 간 기준 차이를 줄이려고 캘리브레이션을 합니다.
연구로 본 효과와 한계
캘리브레이션은 많이 쓰이는 제도인데도 효과를 검증한 연구는 많지 않습니다. 확인할 수 있었던 연구 네 편의 내용을 정리했습니다. 대부분 특정 기업이나 현장의 사례라 우리 회사에도 똑같이 나타난다고 볼 수는 없습니다.
| 연구 | 대상 | 확인된 내용 |
| Demeré, Sedatole & Woods (2019) | 대형 다국적 기업 1곳, 3년간 평가 1,300여 건 | 평가자 간 일관성이 높아지고 관대화가 줄었으나 중심화(중간 등급 쏠림)는 심해짐. 조정 비율은 약 25% |
| Speer, Tenbrink & Schwendeman (2019) | 현장 연구 2건 | 조정 후 등급이 다른 직무 성과 측정치와 더 높은 상관을 보임. 다만 회의에서 성과 지표를 논의했다면 상관이 부풀려졌을 수 있다고 저자들이 밝힘 |
| Bol, de Aguiar & Lill (2025) | 기업 1곳, 구성원 737명·평가자 114명 | 평가자가 공유할 정보를 전략적으로 고르는 정황이 나타남. 검증을 피하거나 등급을 방어하는 비용이 낮은 평가자는 조정을 덜 받았고 구성원 성과를 통제한 뒤에도 등급이 더 높았음 |
| Roch 외 (2012) | 평가자 교육 메타분석 | 평가 기준을 사례로 익히는 FOR(Frame-of-Reference) 교육이 평정 정확도를 높임 |
운영할 때는 세 가지를 챙기세요.
- 등급이 중간으로 모이는지 확인합니다. 회의 전후의 등급 분포를 비교하면 쏠림을 바로 볼 수 있습니다.
- 모든 평가자에게 같은 양식과 발언 기회를 줍니다. 자기 등급을 잘 방어하는 평가자의 구성원만 유리해지는 일을 줄이기 위해서입니다.
- 회의 전에 평가자 교육을 합니다. 회의에서 기준을 처음 맞추려 하면 시간이 모자랍니다.
Demeré 등의 연구에서는 위원회가 조직도상 자신들과 멀리 떨어진 구성원의 등급은 덜 조정하는 경향도 확인됐습니다. 직속 평가자가 더 많은 정보를 가졌다는 점을 존중한 결과로 해석됩니다.
캘리브레이션 회의 진행 순서
- 기준 다시 확인: 평가 시작 전에 등급 정의를 평가자들과 다시 맞춥니다.
- 자료 제출: 평가자가 1차 등급과 근거를 회의 전에 HR에 제출합니다.
- 분포 분석: HR이 평가자별·조직별 등급 분포를 정리하고 논의할 사례를 고릅니다.
- 회의: 안건에 따라 사례를 비교하고 필요한 등급을 조정합니다.
- 기록과 전달: 조정 사유를 기록해 평가자에게 전달한 뒤 평가 면담을 진행합니다.
회의 전 사전 과제
근거를 회의 자리에서 찾기 시작하면 시간이 금방 사라집니다. 자료는 회의 며칠 전까지 모아 두세요.
| 담당 | 준비할 것 |
| 평가자 | 구성원별 1차 등급과 근거 2~3줄. 연중 사례를 포함하고 등급 정의의 어느 문장에 해당하는지 표시 |
| HR | 평가자별·조직별 등급 분포, 직전 평가 대비 변동이 큰 구성원, 논의 사례 목록 |
| 상위 리더 | 올해 조직의 우선순위와 주요 성과 기준 공유 |
근거 양식은 모든 평가자가 똑같이 쓰게 하세요. 어떤 평가자는 다섯 줄, 어떤 평가자는 한 줄을 내면 근거의 양이 등급을 좌우하게 됩니다.
90분 회의 안건 예시
팀장 5~8명, 구성원 30~50명 규모를 가정한 예시입니다. 조직 규모에 맞게 시간을 조절하세요.
| 시간 | 안건 | 진행자가 할 일 |
| 0~10분 | 목적과 규칙 확인 | 등급 정의를 다시 읽고 회의 내용의 비밀 유지를 안내 |
| 10~25분 | 등급 분포 살펴보기 | 평가자별 분포를 공유하고 유독 후하거나 박한 곳을 함께 확인 |
| 25~70분 | 사례 비교 | 최고·최저 등급과 등급 경계 사례를 순서대로 논의 |
| 70~85분 | 조정 결과 확인 | 바뀐 등급과 사유를 읽어 주고 전후 분포를 비교 |
| 85~90분 | 후속 조치 정리 | 면담 일정과 평가자에게 전달할 내용을 확인 |
전원을 한 명씩 논의하면 앞쪽 팀에 시간을 다 쓰게 됩니다. 등급을 바꿀 가능성이 높은 사례부터 다루세요.
근거를 끌어내는 진행자 질문
진행자는 등급을 판단하기보다 근거가 드러나도록 질문합니다.
- "이 등급은 등급 정의의 어느 문장에 해당하나요?"
- "연초와 상반기 사례는 어떤 것이 있었나요? 최근 3개월을 빼도 같은 등급인가요?"
- "같은 등급을 받은 다른 팀 구성원과 비교하면 기준이 같다고 보시나요?"
- "직접 함께 일해 본 분은 어떻게 관찰하셨나요?"
- "등급을 바꾼다면 구성원에게 어떤 사실로 설명할 수 있을까요?"
회의가 왜곡되는 순간과 대처법
| 왜곡 | 어떻게 나타나나 | 대처 |
| 설득력 대결 | 말을 잘하는 평가자의 구성원이 등급을 지킴 | 같은 근거 양식을 쓰고 발언 순서와 시간을 정함 |
| 중간 쏠림 | 논쟁을 피하려고 최고·최저 등급을 중간으로 옮김 | 회의 전후 분포를 비교하고 근거가 충분한 최고·최저 등급은 유지 |
| 간접 평판 | 직접 관찰하지 않은 사람의 인상으로 등급이 바뀜 | 사실과 관찰만 근거로 인정하고 조정할 때 직속 평가자의 의견을 먼저 들음 |
| 정원 맞추기 | 근거보다 등급 비율을 채우는 데 집중함 | 기준 논의와 보상 재원 논의를 분리 |
| 사적 정보 언급 | 휴직, 가정사 같은 업무 외 사정이 거론됨 | 진행자가 즉시 중단하고 업무 행동과 결과로 되돌림 |
회의가 끝난 뒤 해야 할 일
등급 조정은 회의실에서 끝나지 않습니다. 다음 네 가지까지 마쳐야 평가자가 면담에서 결과를 설명할 수 있습니다.
- 조정 기록 남기기: 구성원, 원래 등급, 최종 등급, 조정 사유를 한 줄씩 기록합니다.
- 평가자에게 사유 전달: 회의에 없던 평가자에게도 왜 바뀌었는지 알려 줍니다.
- 코멘트 고치기: 등급이 바뀌었다면 평가 코멘트도 최종 등급과 맞게 고칩니다. 작성법은 인사평가 코멘트 작성법을 참고하세요.
- 다음 평가에 반영: 자주 어긋난 등급 정의나 사례를 정리해 다음 평가자 교육 자료로 씁니다.
면담에서 "회의에서 그렇게 결정됐다"고만 말하면 구성원이 평가를 받아들이기 어렵습니다. 평가자가 최종 등급의 근거를 자기 말로 설명할 수 있도록 회의 직후에 내용을 정리해 두세요.
작은 조직의 캘리브레이션
평가자가 많지 않은 조직도 형태를 줄여 운영할 수 있습니다.
| 평가자 수 | 운영 방식 예시 |
| 1명 | 대표나 옆 조직 리더가 등급과 근거를 교차 검토 |
| 2~3명 | 최고·최저 등급과 경계 사례만 30~40분 논의 |
| 4~8명 | 위의 90분 안건을 그대로 사용 |
인원이 적을수록 구성원을 특정하기 쉬우니 회의 내용의 비밀 유지를 더 분명히 안내하세요.
자주 묻는 질문
Q. 캘리브레이션 뜻이 무엇인가요?
원래는 측정 도구의 눈금을 맞춘다는 뜻입니다. 인사평가에서는 평가자들이 1차 등급과 근거를 비교해 기준을 맞추고 필요하면 등급을 조정하는 회의를 말합니다.
Q. 캘리브레이션을 하면 상대평가가 되나요?
그렇지 않습니다. 등급별 비율을 미리 정해 배분하는 강제 배분과 달리, 캘리브레이션은 평가자 간 기준을 맞추는 절차입니다. 회사가 두 제도를 함께 쓰는 경우는 있습니다.
Q. 등급은 어느 정도 바뀌어야 정상인가요?
정해진 기준은 없습니다. 한 다국적 기업을 분석한 연구에서는 약 25%의 등급이 조정됐지만 회사마다 다를 수 있습니다. 조정 비율보다 조정 사유가 기록됐는지, 특정 평가자에게 쏠리지 않았는지를 보는 편이 낫습니다.
Q. 구성원에게 캘리브레이션을 거쳤다고 알려야 하나요?
회사 정책에 따라 다릅니다. 절차가 있다는 사실은 평가 안내에 미리 알리되, 회의에서 오간 개별 발언은 공개하지 않는 방식을 권합니다. 어떤 경우든 평가자가 최종 등급의 근거를 직접 설명할 수 있어야 합니다.
등급의 근거를 회의 전에 모아 두려면
캘리브레이션이 길어지는 큰 이유는 평가자가 1년 치 근거를 평가 시즌에 한꺼번에 찾아야 하기 때문입니다. 오블릿(Orblit)은 연중 1on1 기록을 바탕으로 구성원의 셀프 리뷰 작성을 돕고, 리더에게는 리뷰 면담 가이드를, HR에게는 리뷰 수합과 진행 현황을 제공합니다. 오블릿이 실제로 어떻게 작동하는지 아래 영상에서 확인해 보세요.
함께 읽으면 좋은 글
- 인사평가 코멘트 작성법: 등급·역량별 문구 예시 50
- 자기평가서 쓰는 법: 직무별 예시와 바로 쓰는 양식
- 연간 성과평가(KPI)의 문제점: HBR이 경고한 전통적 인사평가의 한계와 대안
- 상시 성과관리(CPM) 도입 가이드: 연말 인사 평가 공정성 높이는 법
참고 자료
- Demeré, Sedatole & Woods (2019). The Role of Calibration Committees in Subjective Performance Evaluation Systems. Management Science, 65(4), 1562–1585. https://doi.org/10.1287/mnsc.2017.3025
- Speer, Tenbrink & Schwendeman (2019). Let's Talk it Out: The Effects of Calibration Meetings on Performance Ratings. Human Performance, 32(3–4), 107–128. https://doi.org/10.1080/08959285.2019.1609477
- Bol, de Aguiar & Lill (2025). Calibration in the Performance Evaluation Process. Human Resource Management, 64(4), 1141–1159. https://doi.org/10.1002/hrm.22302
- Roch, Woehr, Mishra & Kieszczynska (2012). Rater training revisited: An updated meta-analytic review of frame-of-reference training. Journal of Occupational and Organizational Psychology, 85(2), 370–395.

![핵심 인재 육성 방법: 발굴·성장·유지 1on1 가이드 [웨비나 정리]](/_next/image?url=https%3A%2F%2Ffirebasestorage.googleapis.com%2Fv0%2Fb%2Forblit-blog.firebasestorage.app%2Fo%2Fblog-covers%252Ftalent-density-webinar-part2-cover_1793708029558_jr3k94cfy_lg.webp%3Falt%3Dmedia%26token%3Da386a25f-5578-4d21-9d92-e5491b9b17df&w=1920&q=100)

![인재 밀도 높이는 채용과 온보딩 1on1 가이드 [웨비나 정리]](/_next/image?url=https%3A%2F%2Ffirebasestorage.googleapis.com%2Fv0%2Fb%2Forblit-blog.firebasestorage.app%2Fo%2Fblog-covers%252Ftalent-density-webinar-part1-cover_1793342910998_bdoc9ldir_lg.webp%3Falt%3Dmedia%26token%3D4aed389a-7c79-4f2b-b655-4e72ae6f82df&w=1920&q=100)