“실패했지만 많이 배웠다”는 말은 교육 실험의 결론으로 충분하지 않다. 무엇을 예상했고 어디서 어긋났으며 다음 결정이 어떻게 달라질지 설명할 수 있어야 한다. 참여자의 반응이 기대에 못 미쳤다는 기록만 남기면 같은 조건에서 이름만 다른 교육을 다시 시도할 수 있다. 반대로 한 번의 부진을 이유로 새로운 방식을 모두 포기하면 검증하지 못한 가능성까지 함께 버리게 된다.
교육 실험 포트폴리오는 여러 시도의 성공률을 모아 놓은 목록이 아니라, 각 시도가 어떤 불확실성을 줄였고 다음 선택에 무엇을 남겼는지 연결하는 관리 방식이다. 이 글에서 제안하는 실무 개념이며 검증된 단일 표준 모형을 뜻하지 않는다. 기업교육 담당자에게 필요한 것은 실패를 미화하는 문화도, 실패를 숨기는 보고 체계도 아니다. 시도의 결과와 다음 판단을 연결하는 운영이다.
기대한 결과가 없었다면 먼저 질문을 분리한다
교육 실험이 실패했다는 말에는 서로 다른 상황이 섞인다. 계획한 학습 활동이 실행되지 않았을 수 있고, 활동은 실행됐지만 업무 행동이 달라지지 않았을 수 있다. 행동은 달라졌지만 기대한 사업 결과가 나타나지 않았거나, 평가 자료가 부족해 어느 쪽인지 판단하지 못했을 수도 있다. 이들을 같은 실패 건수로 합치면 다음에 고쳐야 할 곳이 보이지 않는다.
가령 현장 코칭을 도입했는데 결과물의 품질이 그대로라고 하자. 코칭을 받을 시간이 없었던 경우와, 코칭은 충분했지만 다룬 사례가 실제 과제와 달랐던 경우는 다른 문제다. 전자는 운영 조건을, 후자는 학습 내용과 과제의 연결을 살펴야 한다. 같은 코칭 시간을 더 배정하는 것만으로 두 문제를 함께 해결할 수는 없다. 이는 교육 운영을 설명하기 위한 가상의 사례다.
실험을 시작할 때부터 확인할 질문을 적어 두면 결과를 해석하기 쉽다. 지금은 사람들이 새로운 방식으로 연습할 수 있는지 알아보는 단계인지, 특정 방식이 기존 방식보다 나은지 비교하는 단계인지 구분한다. 아직 실행 가능성도 확인하지 못한 시도에 정교한 효과 추정만 요구하면 운영의 빈틈을 놓칠 수 있다. 반대로 좋은 반응만 확인하고 효과가 입증됐다고 보고해서도 안 된다.
결과가 불명확한 경우에는 실패와 미판정을 구분해 기록한다. 자료가 없어서 모르겠다는 결론은 교육이 효과 없다는 결론과 다르다. 다만 미판정을 반복하면서 계속 투자할 수는 없다. 다음 시도에서 어떤 자료를 확보할 수 있을지, 그 자료를 얻는 데 필요한 비용과 시간이 감당 가능한지까지 검토해야 한다.
탐색하는 시도와 효과를 비교하는 실험은 남길 근거가 다르다
조직 실험을 다룬 Corbo·Katila·Vlačić의 2026년 통합 문헌 검토는 문제를 풀어 가는 탐색과 인과효과를 구분하려는 실험을 나누어 설명한다. 두 접근을 변이의 생성, 선택, 보존이라는 단계로 연결한다.[1] 문헌을 통합한 개념적 틀이며, 이 절차대로 교육을 운영하면 성과가 높아진다는 검증 결과는 아니다.
Corbo 외, Experimentation in Organizations: An Integrative Review, 저자 공개본 Figure 3·PDF 72쪽. PS는 문제해결, CI는 인과추론 접근이다. 출판 논문은 2026년 5월 공개됐으며, 이미지의 저자 공개본 표지는 2025년 11월이다. 단계별 설계 선택을 정리한 개념 도표로 교육 효과의 측정값이 아니다. 재사용 권리는 업로드 전 확인 필요.
기업교육에서는 이 구분을 보고서의 질문에 반영할 수 있다. 처음 써 보는 역할 연습이라면 참가자가 어떤 설명에서 막히는지, 진행자가 어느 지점에서 도움을 줘야 하는지 관찰할 수 있다. 이런 탐색은 개선안을 만드는 데 유용하지만 다른 교육보다 우수하다는 결론을 뒷받침하지는 않는다. 비교가 필요한 단계에서는 대상, 과제, 평가 방식과 비교 조건을 더 엄격히 정해야 한다.
탐색 과정에서 운영을 바꿨다면 변경 자체를 숨기지 않는다. 어떤 회차에 사례를 수정했고 안내를 추가했는지 남긴다. 같은 이름의 프로그램이라도 실제 경험이 달랐다는 사실을 알 수 있어야 한다. 이후 비교 실험을 한다면 그중 어떤 운영안을 평가할 것인지 고정하고, 필요한 변경은 별도의 이력으로 관리한다.
하나의 시도에서 모든 질문에 답하려 하지 않는 것도 중요하다. 참가자가 사용할 수 있는지, 지도자가 운영할 수 있는지, 역량이 바뀌는지, 실제 업무에 적용되는지는 연결되지만 서로 다른 질문이다. 우선순위를 정하고 이번 시도로 답할 수 없는 질문은 다음 판단 과제로 남긴다. 작은 실험의 가치는 작은 범위에서도 무엇을 알게 됐는지 분명한 데 있다.
실패 기록에는 하지 않은 선택도 남겨야 한다
성공하지 못한 시도를 기록하는 일은 필요하지만, 실행한 프로젝트만 보면 판단의 절반을 놓칠 수 있다. 검토하다가 중단한 교육 방식이나 시기를 미룬 과제도 나중에 다시 살펴볼 가치가 있다. 다만 다른 조직의 성공 사례를 보았다는 이유만으로 과거의 중단을 곧바로 잘못이라고 단정해서는 안 된다. 당시의 정보와 자원 조건을 함께 보아야 한다.
Nickel 외의 2026년 연구는 미국 관리자의 가상 혁신 프로젝트 판단에서, 추진했다가 손실을 본 실패와 포기했다가 기회를 놓친 실패가 이후의 지속 의향에 서로 다른 방향으로 작용할 수 있음을 보여 준다.[2] 실제 교육 투자 수익이나 지속 결정의 최종 정답을 측정한 연구는 아니다. 실무적으로는 최근의 아쉬움이 새 실험의 근거를 대신하고 있지 않은지 확인하는 질문을 던질 수 있다.
교육 담당자가 “지난번에 너무 빨리 접었으니 이번에는 더 해 보자”고 말할 때도 같은 검토가 필요하다. 이번 프로그램에서 추가로 확인할 내용이 있는지, 조건이 실제로 달라졌는지 묻는다. 반대로 “비슷한 교육이 예전에 실패했다”는 이유로 거절할 때는 대상과 과제, 지원 환경이 얼마나 유사한지 살펴본다. 지난 결과는 참고 자료이지 자동 승인이나 자동 거절의 규칙이 아니다.
실패 기록을 사람의 성향을 분류하는 도구로 쓰지 않는다. 누가 과감하고 누가 소극적인지 점수를 매기기보다, 현재 결정에 사용한 근거가 충분한지 확인한다. 같은 자료를 다른 담당자가 검토해도 결론의 이유를 이해할 수 있는지가 더 중요하다. 독립적인 검토자는 결론을 대신 정해 주는 사람이 아니라 빠진 가정과 대안을 확인하는 역할을 맡는다.
다음 시도를 바꾸지 못하는 교훈은 아직 미완성이다
“현업의 협조가 중요하다”, “참여자의 동기를 높여야 한다”는 교훈은 틀리지 않지만 다음 행동을 정하기에는 넓다. 어느 업무에서 협조가 필요했고 누가 무엇을 제공하지 못했는지 구체화해야 한다. 동기가 낮아 보였던 행동도 학습 시간이 없었기 때문인지, 과제가 직무와 맞지 않았기 때문인지 구분하지 않으면 개인의 태도 문제로 끝날 수 있다.
다음 표는 실패를 성공 이야기로 고치는 서식이 아니라 판단 가능한 기록을 남기기 위한 편집자의 제안이다. 확인하지 못한 원인은 추정이라고 표시하고, 서로 다른 설명이 가능하면 함께 적는다. 하나의 그럴듯한 이야기로 결과를 정리하기보다 어떤 설명을 다음에 구분할지 남기는 것이 목적이다.
| 흔히 남는 말 | 추가로 확인할 내용 | 다음 선택에 남길 것 |
|---|---|---|
| 참여가 저조했다 | 초대 대상·업무 충돌·접속 조건 | 모집 범위나 운영 조건의 변경 |
| 현업에 적용하지 않았다 | 적용 과제와 권한이 있었는지 | 실습·적용 기회를 확보할 책임자 |
| 효과가 없었다 | 비교 조건과 평가 자료가 충분한지 | 결론의 범위와 추가 확인 자료 |
| 더 해 볼 필요가 있다 | 무엇을 새롭게 알 수 있는지 | 재시도의 질문과 종료 시점 |
| 확대하기 어렵다 | 비용·지도 인력·업무 제약 중 무엇인지 | 수정할 조건 또는 중단 근거 |
기록에는 관찰한 사실, 그 사실에 대한 해석, 다음에 취할 조치를 나누어 둔다. 세 가지가 섞이면 추정이 사실처럼 재사용되기 쉽다. 예를 들어 “참여자는 실습을 싫어했다”보다 “실습 시간에 다른 업무로 중도 이탈한 사례가 있었고 이유를 추가 확인해야 한다”가 이후 의사결정에 더 유용하다. 설명이 덜 매끄러워도 불확실성을 남기는 편이 낫다.
또한 교훈의 적용 범위를 적는다. 특정 교대조에서 나타난 운영 문제가 모든 직원에게 같다고 볼 수는 없다. 어떤 조건이 유지될 때 참고할 수 있는지, 다른 조직에서 다시 확인해야 할 것은 무엇인지 기록한다. 재사용 가능한 지식은 모든 상황에 맞는 문장이 아니라, 적용할 수 있는 조건이 드러난 판단이다.
실험 결과를 보존하려면 다음 담당자의 일이 바뀌어야 한다
앞서 소개한 통합 검토의 개념 모형은 실험의 결과가 다시 다음 시도로 이어지는 관계를 제시한다.[1] 교육 담당자에게 중요한 해석은 보고서 보관을 넘어 운영의 변경으로 연결해야 한다는 것이다. 다만 아래 도표의 화살표를 실제 기업교육에서 검증된 인과 경로로 읽어서는 안 된다.
Corbo 외, 저자 공개본 Figure 4·PDF 72쪽. 실험의 동인·과정·결과와 되돌아가는 관계를 정리한 개념 모형이다. 2025년 11월 표지의 저자 공개본을 사용했으며 2026년 출판판과 구분한다. 성과 향상의 크기나 성공 확률을 나타내지 않는다. 재사용 권리는 업로드 전 확인 필요.
후속 담당자가 교육을 기획할 때 이전 실험의 기록을 실제로 만날 수 있어야 한다. 관련 과정을 검색했을 때 성공 사례만 나오고 중단된 시도는 별도 폴더에 숨겨져 있으면 같은 문제가 반복될 수 있다. 제목과 요약에 대상 업무, 시험한 조건, 결론의 범위를 남기고 필요한 원자료에 접근할 경로를 정한다. 민감한 참여자 정보는 재사용 목적에 맞게 제한한다.
기록을 읽었다는 확인만으로 보존이 끝나지는 않는다. 다음 교육에서 사례가 바뀌었는지, 지도자 안내가 수정됐는지, 실습 환경 확보 절차가 추가됐는지 확인한다. 변경할 필요가 없다고 판단했다면 이유를 남길 수 있다. 모든 교훈을 의무 규칙으로 만드는 대신 어떤 결정에 참고했고 무엇을 바꿨는지 추적하는 방식이다.
오래된 교훈은 다시 검토할 필요도 있다. 당시에는 도구 기능이 부족했지만 지금은 달라졌을 수 있고, 대상 직무의 요구가 바뀌었을 수 있다. 과거의 실패를 영구 금지 사유로 두지 않으려면 기록에 확인 시점과 조건을 포함해야 한다. 다시 시도할 때는 이전 판단이 틀렸다고 선언하기보다 무엇이 달라졌는지부터 설명한다.
실패를 공개하라는 요구에는 검토할 시간도 따라야 한다
실패 사례를 공유하라는 캠페인만으로 학습이 일어나지는 않는다. 자료를 정리하고 동료와 해석을 맞추며 다음 운영안을 수정하는 데 시간이 든다. 교육 담당자가 이 작업을 모두 기존 업무 밖에서 처리하도록 하면 기록은 짧은 소감으로 끝나기 쉽다. 공유 횟수만 늘리기보다 검토의 목적과 필요한 지원을 정해야 한다.
MIT Sloan이 2026년 9월 소개한 의료기관과 법률회사 현장 연구는 AI 실험 과정의 추가 업무와 이를 뒷받침하는 조직 지원을 다뤘다. 두 조직의 사례 비교이며 지원 제도의 개별 효과를 분리한 실험은 아니다.[3] 기업교육에서는 결과 검토와 개선 작업을 보이지 않는 추가 업무로 남겨 두지 말아야 한다는 운영 문제로 연결할 수 있다.
검토 회의에서는 실패를 고백한 사람에게 해결 책임까지 모두 넘기지 않는다. 업무 권한이나 시스템 환경의 문제라면 이를 바꿀 수 있는 담당자를 참여시킨다. 교육팀이 바꿀 수 없는 제약을 교육팀의 개선 과제로만 기록하면 다음 회차에도 같은 조건이 반복된다. 조치의 책임자는 문제를 발견한 사람이 아니라 조정 권한을 가진 사람일 수 있다.
동시에 학습을 명분으로 모든 실패를 면책하지 않는다. 알려진 절차를 무시한 경우, 충분히 검토하지 않은 위험을 타인에게 전가한 경우와 제한된 범위에서 새로운 가설을 확인한 경우는 다르게 다뤄야 한다. 실패를 허용한다는 말보다 어떤 범위의 시도를 승인했고 어떤 보호 조치를 지켰는지 확인하는 것이 우선이다.
좋은 포트폴리오는 성공률보다 판단이 달라진 흔적을 남긴다
한국 기업의 교육 부서는 실험 건수와 확대 건수만으로 혁신을 보고하기 쉽다. 그러나 확대하지 않은 시도도 잘못된 투자를 피하는 데 기여했을 수 있고, 확대된 시도도 아직 효과를 충분히 확인하지 못했을 수 있다. 성공률을 높이려고 쉬운 과제만 선택하거나 불명확한 결과를 성공으로 분류하면 포트폴리오의 의미가 약해진다.
운영을 점검할 때는 이번 시도에서 새로 확인한 것, 다음 결정에 반영한 것, 아직 모르는 것을 함께 본다. 재시도는 새 정보가 생길 근거가 있을 때 선택하고, 중단은 설명 가능한 결론으로 남긴다. 단일한 비율을 조직 전체의 목표로 정하기보다 각 실험이 맡은 질문과 자원 한도에 맞춰 검토한다.
교육 실험의 목적은 실패 사례를 많이 모으는 데 있지 않다. 이전보다 나은 근거로 다음 교육을 설계하고, 더 이상 같은 가정에 기대지 않도록 하는 데 있다. 실패한 시도를 보고서에서 지우지 않되 그 결과를 영구적인 정답으로도 만들지 않는 것, 그것이 기업교육의 실험을 조직의 학습으로 바꾸는 출발점이다.
함께 읽을 글
- 학습 시간 확보, 관리자는 교육 승인보다 업무 조정을 먼저 해야 한다
- 실습 사례의 범위, 많이 풀어도 경험하지 못하는 예외가 있다
- 실험 역량은 좋은 아이디어보다 ‘언제 멈출지’에서 갈린다
출처
- Corbo, L., Katila, R., & Vlačić, B. (2026-05-15). Experimentation in Organizations: An Integrative Review. Academy of Management Annals, DOI:10.5465/annals.2024.0287. 저자 공개본은 표지 2025년 11월 판본. 본문·도표 확인에 사용했으며 출판 최종판과 구분.
- Nickel, J., Hofmann, B., Schuhmacher, M. C., & Sarangee, K. R. (2026-04-07). Flops and Missed Opportunities: The Differential Effect of Distinct Failure Types on Persistence With Underperforming Innovation Projects. Journal of Product Innovation Management,43(5),719–745. 미국 관리자 대상 가상 판단 연구. 지속 의향과 최종 성과는 구분.
- MIT Sloan Office of Communications (2026-09-09). Why some organizations turn AI experiments into business value while others quietly fail. 두 조직 현장 연구의 공식 소개. 개별 지원 장치의 인과효과로 해석하지 않음.