교육의 효과를 확인하려면 비교가 필요하다. 그렇다고 일부 직원에게 필요한 교육을 무기한 미루게 해서는 안 된다. 기업교육에서 비교집단 설계의 출발점은 누가 교육을 못 받게 할 것인가가 아니다. 어떤 질문에 답하기 위해 제공 시점이나 지원 방식을 달리하고, 그 차이를 언제 어떻게 해소할 것인가다.
교육 비교집단 설계는 교육을 받은 집단의 변화를 해석할 수 있도록 다른 집단의 교육 조건과 관찰 시점을 미리 정하는 작업이다. 대기집단은 일정한 비교 기간이 지난 뒤 교육을 제공받도록 설계한 집단이다. 교육을 영구히 배제하는 집단과 다르며, 대기 중에 아무 지원도 받지 않는다는 뜻도 아니다. 무엇을 기다리고 무엇은 계속 이용할 수 있는지 구체적으로 적어야 한다.
대기집단에도 교육을 제공했다는 말의 빈칸
교육 담당자가 “모두 결국 같은 과정을 듣는다”고 설명하면 공정성 문제가 해결된 듯 보일 수 있다. 그러나 나중에 열리는 교육에 실제로 참여할 수 있는지는 별개의 문제다. 그 사이 업무가 바뀌거나 성수기가 시작될 수 있고, 직원을 보내 주기로 했던 관리자가 이동할 수도 있다. 일정만 약속하고 참여에 필요한 시간과 대체 업무를 확보하지 않으면 형식적인 접근권만 남는다.
2026년 5월 공개된 Boulton과 동료들의 연구는 호주 초등교육 종사자를 대상으로 온라인 학급관리 교육을 평가했다. 즉시 교육을 받는 집단과 대기집단을 무작위로 나눴고, 대기집단에는 11주 뒤 교육 접근권을 제공했다. 아래 참여 흐름은 배정된 사람, 교육을 마친 사람, 추적 조사에 남은 사람이 같지 않다는 점을 보여 준다.[1]
Boulton 외, Figure 1. 원문 참여 흐름도이며 대기집단은 11주 후 교육에 접근했다. 교육 완료와 추적 조사 완료는 서로 다른 단계다. 연구는 2026년 발표됐지만 모집과 추적 자료 수집은 2021~2024년에 이뤄졌다. ©2026 저자들, CC BY 4.0.
연구진은 대기집단에서 더 큰 이탈이 나타났으며, 기다리는 동안 참여 동기가 약해졌을 가능성을 논의했다. 다만 대기 기간이 이탈의 유일한 원인임을 확정한 결과는 아니다. 남아 있는 참여자가 처음 배정된 전체를 대표하지 못할 가능성 때문에 효과 해석에도 주의가 필요하다. 이 연구를 국내 기업의 이탈률 예측에 그대로 사용할 수는 없지만, 나중에 제공한다는 약속과 실제 참여를 따로 확인해야 한다는 운영 문제는 분명하다.
기업에서는 후순위 참여자의 이름만 명단에 남겨 놓지 말고 교육 날짜, 참여 가능 시간, 승인할 관리자, 일정이 깨졌을 때의 대체 경로를 함께 기록하자. 이 내용은 결과가 좋게 나왔을 때만 실행하는 보상이 아니다. 비교에 참여하도록 안내할 때부터 제시해야 할 조건이다. 교육 효과가 기대보다 작더라도 이미 약속한 학습 기회를 어떻게 이행할지 설명할 책임은 남는다.
아무것도 하지 않는 집단과 비교해야만 하는가
비교의 의미는 상대 집단이 무엇을 받았는지에 따라 달라진다. 새 교육과 대기를 비교하면 해당 기간에 새 교육을 제공한 경우와 아직 제공하지 않은 경우의 차이를 묻는다. 기존 교육과 비교하면 새로운 방식이 현재 운영보다 나은지 묻는다. 같은 교육에 코칭을 더한 집단과 비교하면 추가 지원의 가치를 묻는다. 모두 교육 평가이지만 답하는 질문은 다르다.
이 차이는 설문 제목보다 운영 기록에서 더 선명해야 한다. 두 집단이 같은 자료실을 이용하고 동일한 관리자 코칭을 받았다면, 비교 대상은 그런 공통 지원 위에 추가된 교육이다. 반대로 한 집단만 특별한 관심과 업무 시간을 받았다면 콘텐츠만의 효과라고 해석하기 어렵다. 교육 담당자가 바꾼 것이 무엇이고 공통으로 유지한 것이 무엇인지 먼저 적어야 한다.
덴마크 병원 중간관리자 교육을 다룬 Matterhorn 등록자료는 이 구분을 보여 준다. 2026년 7월 갱신 공개된 ClinicalTrials.gov 기록에는 교육 집단의 모듈형 훈련과 소집단 연습이 설명돼 있다. 비교집단에도 웨비나와 서면 자료를 제공하겠다는 제안이 포함된다. 등록자료는 이를 능동 비교집단으로 명시한다.[2] 대기집단이라는 이름만 보고 아무 지원도 없는 집단이라고 간주하면 연구 질문을 잘못 읽게 된다.
이 기록은 교육 효과가 입증됐다는 결과 보고가 아니다. 연구 상태가 완료로 표시됐다는 사실과 결과가 공개돼 효과를 확인할 수 있다는 사실도 구분해야 한다. 여기서 참고할 것은 비교집단의 지원을 구체적으로 적은 설계 방식이다. 기업에서도 “미교육자”라는 한 단어 대신 실제로 제공한 교육, 자료, 상담과 업무 시간을 기록하는 편이 정확하다.
| 알고 싶은 질문 | 비교 기간에 달리할 조건 | 두 집단 모두에게 분명히 할 내용 |
|---|---|---|
| 새 과정을 지금 제공할 가치가 있는가 | 새 과정의 제공 시점 | 후순위 제공 날짜와 기존 지원 이용 범위 |
| 현재 교육을 대체할 만한가 | 기존 과정과 새 과정 | 공통 학습 목표와 평가 방식 |
| 현장 코칭을 추가할 가치가 있는가 | 공통 교육 후 추가 코칭 | 기본 교육과 일반적인 업무 지원 |
| 운영 방식이 참여를 돕는가 | 학습 시간 배치나 지원 방식 | 필수 교육 내용과 업무상 필요한 접근권 |
편집자가 제안하는 질문별 설계 구분이다. 특정 연구에서 검증한 표준 배정표가 아니다.
공통 지원을 남겨 두면 무엇을 비교하는지 더 정확해진다
필요한 지원을 비교 때문에 끊을 이유는 없다. 안전한 업무 수행에 즉시 필요한 안내나 이미 보장한 기본 교육은 공통으로 제공하고, 아직 추가 가치가 불확실한 프로그램을 비교 대상으로 삼을 수 있다. 이런 판단은 교육 담당자 혼자 내리기보다 현업 책임자와 함께 해당 업무의 필요와 위험을 확인해 정하는 편이 좋다. 이는 법적 의무의 범위를 판정하는 설명이 아니라 교육 운영의 원칙이다.
공통 지원을 제공했다면 결과 해석에도 그대로 반영한다. 기존 교육을 계속 받은 두 집단 중 한 집단에만 추가 사례 연습을 제공했다면, 확인하려는 것은 추가 연습의 가치다. 결과가 작다고 기본 교육 전체가 쓸모없다고 결론 내릴 수 없다. 반대로 차이가 크더라도 추가 연습 없이 일하는 모든 조직에 같은 성과가 생긴다고 말할 수는 없다.
Boulton과 동료들의 교육은 다음 표처럼 목표와 내용을 모듈별로 명시했다. 이 표는 대기 기간의 공정성을 검증한 자료가 아니라, 제공할 교육이 무엇인지 확인하는 자료다. 비교집단을 설계할 때도 이런 수준으로 내용과 지원을 기록해야 “같은 교육을 나중에 제공한다”는 약속이 구체적인 의미를 갖는다.[1]
Boulton 외, Table 1, PDF 6쪽. 교육 모듈의 목표와 주제, 영상 길이를 제시한 표다. 원문 표 영역을 발췌해 읽는 방향만 회전했으며 내부 텍스트는 번역하지 않았다. 이 교육 내용을 일반 기업교육의 권장 교과로 제안하는 것은 아니다. ©2026 저자들, CC BY 4.0.
후순위 교육이 시작되기 전에 내용이 크게 바뀌면 변경 이력을 남긴다. 안전이나 정확성 때문에 필요한 수정은 미루지 않되, 최초 집단과 동일한 프로그램을 제공한 것처럼 기록해서는 안 된다. 강사의 피드백이 추가됐는지, 연습 시간이 늘었는지, 평가가 달라졌는지 구분한다. 더 나은 교육을 제공하는 일과 비교 조건을 정확하게 설명하는 일은 함께 할 수 있다.
단계적 교육 도입의 순서를 성과의 원인으로 착각하지 않는다
강사나 좌석이 부족해 여러 차수로 교육을 운영하는 기업은 많다. 이 순서를 활용하면 일부 조직의 학습 기회를 영구히 제외하지 않고 변화를 비교할 여지가 생긴다. 그러나 먼저 받은 팀과 나중에 받은 팀을 나누는 것만으로 공정한 효과 비교가 완성되지는 않는다. 먼저 신청한 팀이 원래 변화 의지가 높거나, 문제가 큰 팀에 우선 제공했을 수도 있다.
운영상 가능한 조건에서 순서를 정하는 기준을 사전에 설명하고 기록한다. 교육 효과를 비교하기 위한 무작위 배정과, 업무 긴급도에 따른 우선순위 배정은 다른 절차다. 긴급한 팀을 우선하는 결정이 필요할 수 있지만 그 경우에는 출발 조건이 달랐다는 점을 결과에 포함해야 한다. 우선순위를 숨긴 채 교육 전후의 차이를 프로그램 효과로만 표현하지 않는다.
달력도 비교 조건의 일부다. 같은 교육 후 한 달을 관찰하더라도 어느 팀은 평상시, 다른 팀은 성수기를 지나면 업무 기회와 부담이 달라질 수 있다. 교육 이후 경과 시간과 실제 업무 시기를 함께 남기고, 주요 제도 변경이나 조직 이동도 기록한다. 복잡한 단계적 도입 자료를 분석할 때는 단순 평균 차이로 끝내지 말고 설계에 맞는 분석 검토를 받는 편이 좋다.
다음은 가상의 기업 운영 예시다. 고객지원 조직이 새 상담 사례 연습을 순차 도입한다면 기존 업무 매뉴얼과 긴급 지원은 모든 팀에 계속 제공한다. 추가 연습의 참여 시점만 달리하되, 후순위 팀의 교육 시간도 미리 확보한다. 평가에서는 오류 발생뿐 아니라 실제로 해당 유형의 상담을 맡았는지 확인한다. 연습 기회와 업무 노출이 다른 상태에서 오류 건수만 비교하면 교육의 역할을 잘못 읽기 쉽다.
정보 공유를 막는 대신 비교 조건이 바뀐 흔적을 남긴다
조직 안에서는 배운 내용을 동료에게 알려 주는 일이 자연스럽다. 먼저 교육을 받은 직원이 후순위 동료에게 자료를 전달하거나 함께 문제를 해결할 수 있다. 이것은 조직학습의 장점이지만 집단 간 차이를 해석할 때는 고려해야 할 조건이다. 교육을 받지 않은 집단이 교육 내용에 전혀 노출되지 않았다고 가정하면 실제 운영과 분석이 어긋난다.
그렇다고 협업에 필요한 지식 공유를 무조건 금지하는 방식은 적절하지 않다. 교육 자료 접근 기록, 공동 업무 여부, 다른 교육 참여, 관리자의 보충 설명 등을 가능한 범위에서 확인한다. 평가 목적과 기록 범위를 미리 안내하고 필요한 정보만 수집한다. 정보가 공유됐다는 사실을 참가자의 잘못으로 다루기보다 조직 안에서 실제로 어떤 학습이 일어났는지 설명하는 자료로 삼는다.
Boulton과 동료들의 연구도 개인 단위 배정에 따른 학교 내 군집과 집단 간 내용 공유 가능성을 한계로 언급했다. 모든 조직에서 팀 단위 배정이 정답이라는 뜻은 아니다. 함께 일하는 관계가 밀접하다면 무엇을 배정 단위로 삼을지 검토해야 한다는 의미다. 팀 단위로 나눴더라도 팀 사이 협업이 많으면 경계가 완전히 유지된다고 가정할 수 없다.
분석 계획에서는 원래 배정 기준으로 본 결과와 실제 참여 양상을 구분해 설명한다. 교육을 끝까지 들은 사람만 골라 비교하면 교육에 참여하기 쉬웠던 조건까지 성과에 섞일 수 있다. 미참여와 이탈을 지우는 대신 어느 단계에서 왜 자료가 사라졌는지 확인한다. 결측이 많다면 효과 수치의 정확도뿐 아니라 누구에게 적용할 수 있는 결론인지도 좁혀야 한다.
비교가 끝나는 날은 약속을 이행하는 날이어야 한다
교육 평가 일정에는 결과 보고서 제출일만 적어서는 부족하다. 후순위 집단에 접근권을 여는 날짜, 근무 시간에 참여할 수 있도록 조정하는 날짜, 실제 참여 여부를 확인하는 날짜가 필요하다. 링크 발송은 접근 제공의 기록이지만 학습 기회가 실현됐다는 충분한 증거는 아니다. 접속 문제와 업무 충돌로 참여하지 못한 직원에게 대체 일정을 안내할 담당자도 정한다.
결과를 공유할 때는 어느 조건과 어느 기간을 비교했는지 먼저 설명한다. “교육이 효과적이었다”는 한 문장보다 “기존 지원을 유지한 상태에서 추가 연습을 먼저 제공한 집단의 변화를 비교했다”는 설명이 다음 의사결정에 도움이 된다. 대상과 조건을 좁혀 말하면 성과가 작아 보이는 것이 아니라, 무엇을 계속 운영할지 판단하기 쉬워진다.
한국 기업의 교육 담당자는 운영 계획을 승인받을 때 평가 방법과 교육 접근권을 같은 문서에 담을 수 있다. 비교를 위한 대기 기간, 계속 이용할 지원, 예외가 필요한 상황, 후순위 참여 시간, 결과 해석의 한계를 함께 적는 것이다. 일정 변경이 생기면 대상자에게 알리고 운영 기록에도 반영한다. 좋은 설계는 통계적으로 비교할 수 있으면서 현업에 설명할 수 있어야 한다.
교육 기회를 보장한다고 비교를 포기할 필요는 없다. 비교를 한다고 사람을 대기 명단에 남겨 둬도 되는 것도 아니다. 필요한 학습을 보장하면서 불확실한 추가 지원의 가치를 확인하는 것, 그리고 기다린 사람에게 약속을 실제로 이행하는 것까지가 교육 비교집단 설계의 책임이다.
함께 읽을 글
- 소규모 교육 실험, 좋은 반응만으로 확대를 결정하지 마라
- 교육 효과 측정, 사후 설문보다 시작 전 비교 설계가 먼저다
- 비정규직 교육 격차, 같은 강좌를 열어두는 것만으로는 공정하지 않다
출처
- Boulton, A. L., Fleming, G. E., Prasad, A. H., Kershaw, K. A., & Kimonis, E. R. (2026-05-12). Testing the Acceptability, Feasibility, and Preliminary Efficacy of an Internet-delivered Positive Classroom Management Training (iPCMT) for Elementary School Educators. Research on Child and Adolescent Psychopathology, 54, 70. 교원 대상 무작위 대기집단 연구. 추적 이탈과 자기보고 측정의 한계가 있으며 국내 기업 효과로 일반화하지 않음.
- Aarhus University. Leading Well-being and the Psychosocial Working Environment — Matterhorn, NCT05623371. ClinicalTrials.gov, 최종 갱신 공개 2026-07-02, 확인 2026-09-29. 최초 등록 2022년, 연구 종료 2024년의 설계 등록자료로 결과 보고가 아님. 공개 API 원본을 함께 보관함.