시나리오 기반 학습: 유용한 피드백을 제공하는 상호작용적 연습 설계 방법

새로운 관리자가 교육 시나리오를 시작합니다. 그래픽은 보기 좋습니다. 밝은 사무실, 말풍선, 세 개의 버튼. 그녀는 가장 신중해 보이는 옵션을 선택합니다. "훌륭합니다! 모든 선택은 우리에게 무언가를 가르쳐줍니다."라는 배너가 나타납니다. 그녀는 다른 옵션을 선택합니다. 같은 배너가 다시 나타납니다. 결국 그녀는 여덟 번의 선택을 하고 여덟 번 칭찬을 받았지만, 어떤 선택이 효과적이었을지에 대해서는 아무것도 배우지 못했습니다.

이는 예시 시나리오일 뿐, 실제 고객 사례는 아닙니다. 이 시나리오는 상호 작용적인 실무에서 가장 흔히 발생하는 오류를 보여줍니다. 즉, 시나리오 자체는 의사 결정처럼 보이지만, 피드백은 그 결정에 따라 달라지지 않는다는 것입니다.

이 가이드는 판단력 향상을 위한 시나리오 기반 학습을 설계하고 교육 관리자를 위해 작성되었습니다. 결정, 선택지, 피드백, 재시도, 실제 학습자를 대상으로 한 테스트 등 다섯 가지 설계 단계를 다룹니다. 마지막에는 예시 문제, 평가 기준표, 그리고 훌륭한 설계에서도 유지되어야 할 제약 조건들을 제시합니다.

시나리오 기반 학습이란 무엇인가요?

시나리오 기반 학습은 학습자를 현실적인 상황에 놓고 의사결정을 내리도록 한 다음, 그 결정의 결과를 보여줍니다. 이는 측정 대상에서 퀴즈와 차이가 있습니다. 퀴즈는 학습자가 무엇을 알고 있는지 묻는 반면, 시나리오는 학습자가 직장에서 마주칠 수 있는 상황과 유사한 상황에서 불완전한 정보만을 가지고 어떻게 행동할지 묻습니다.

이러한 특성 덕분에 판단력이 필요한 작업, 예를 들어 고객 불만 처리, 문제 해결 단계 상향 조정 여부 결정, 두 가지 절차 중 선택 등에 적합합니다. 하지만 부품 번호나 법적 정의처럼 단순히 기억해야 하는 사실에는 적합하지 않습니다. 이러한 정보는 간단한 회상 검색을 통해 확인하고, 시나리오 분석은 판단이 필요한 상황에서 활용하세요.

빠른 사실

1. 의미 있는 결정 하나를 선택하세요

주제가 아니라 결정부터 시작하세요. "고객 서비스"는 주제입니다. "관리자가 답변하기 전에 환불 한도를 초과하는 금액을 환불해 줄 수 있는지 결정하세요"는 결정입니다.

좋은 결정에는 무엇을 만들기 전에 적어둘 수 있는 네 가지 요소가 있습니다.

• 학습자의 권한. 그들은 무엇을 결정할 수 있고, 무엇을 전달해야 하는가?
• 문맥. 누가 참여하고 있으며, 지금까지 어떤 일이 진행되었고, 시간적 압박은 어느 정도입니까?
• 이용 가능한 정보. 그들은 무엇을 알고 있으며, 무엇이 부족한가?
• 그 결과. 그들이 각각의 길을 선택할 경우 다음에 무슨 일이 일어날까요?

이 네 줄을 명확한 문장으로 작성할 수 없다면, 해당 시나리오는 아직 시각화할 준비가 되지 않은 것입니다. 그래픽과 분기는 가장 나중에 추가해야 할 요소이지, 가장 먼저 추가해야 할 요소가 아닙니다.

2. 현실적인 제약 조건과 대안을 작성하십시오.

부실한 시나리오에서는 합리적인 답이 하나 있고, 그 주변에는 아무도 선택하지 않을 만한 선택지들이 많습니다. 학습자들은 이를 즉시 알아채고 생각 없이 합리적인 답을 클릭하게 되어, 의사결정이 마치 추측 게임처럼 되어버립니다.

유능한 동료라면 어떤 이유로든 그 선택지를 제시할 만한 근거를 적어보세요:

• 빠르지만 검사 단계를 건너뛰는 방식입니다.
• 절차를 문자 그대로 따르지만 상황의 세부 사항을 무시하는 사람.
• 문제가 초기에 심각해져 고객의 시간 손실로 이어지는 경우.
• 혼자서 처리해야 하는 일이며, 그만큼 위험이 따릅니다.

그런 다음 일부 정보를 생략하세요. 실제 결정은 모든 사실을 알고 나서 내리는 경우가 드뭅니다. 학습자가 추가 정보를 요청하거나, 가지고 있는 정보만으로 결정을 내리도록 하세요. 학습자가 무엇이 빠져 있는지 알아차리는지 여부는 객관식 답안으로는 알 수 없는 정보를 제공합니다.

3. 결과와 피드백을 설명하십시오.

이 단계는 시나리오가 학습에 효과적인지 여부를 결정하는 단계입니다. 교육 연구 리뷰(Review of Educational Research)에 발표된 발레리 슈트(Valerie Shute)의 형성적 피드백 연구 검토에서는 형성적 피드백을 학습자의 사고나 행동을 수정하여 학습을 향상시키도록 의도된 정보로 정의합니다. 그녀의 검토에 따르면 형성적 피드백은 평가적이지 않고, 지지적이며, 시의적절하고, 구체적이어야 합니다.Shute, 2008, 형성적 피드백에 집중일반적인 칭찬은 마지막 기준을 충족하지 못합니다. 구체적이지 않고, 학습자가 무엇을 선택하든 똑같기 때문입니다.

검토 지침은 시나리오 설계에 잘 적용됩니다.

• 피드백을 목표 및 성과와 연계하세요. 선택이 어떤 결과를 가져왔는지, 그리고 그것이 해당 직무에 필요한 역량과 어떻게 관련되는지 설명하십시오. 슈트는 피드백이 구체적이거나 명확하지 않으면 학습을 방해하고 학습자를 좌절시킬 수 있다고 지적합니다.
• 가능한 한 간단하게 유지하되, 더 이상 간단하게 하지는 마세요. 학습자가 다시 생각해 볼 수 있도록 충분한 정보를 제공하고, 그 이상은 제공하지 마세요. 그녀가 인용한 연구에 따르면, 지나치게 복잡한 피드백은 오히려 단순한 피드백보다 학습 효과를 떨어뜨렸습니다.
• 시도 후 피드백을 제공해 주세요. 학습자가 직접 시도해 보기 전에는 답을 보여주지 마십시오. 연구 검토 결과에 따르면 이러한 점을 고려한 연구에서도 피드백의 효과가 나타났습니다.
• 학습자들을 서로 비교하는 것을 피하십시오. 이 검토에서는 상대평가와 같은 규범적 비교를 피해야 할 사항으로 나열합니다. 집단이 아닌 표준에 따라 보고해야 합니다.

피드백 메시지가 어떻게 바뀌는지 보여드리겠습니다.

피드백 시점 또한 중요한 설계 요소입니다. 동일한 연구 검토에 따르면 즉각적인 피드백은 오류를 실시간으로 수정하는 데 도움이 되며, 어려운 새로운 과제에 더 효과적입니다. 반면, 지연된 피드백은 학습 전이에 더 나은 결과를 가져오는 것으로 나타났습니다. 시나리오 학습에 적용하는 합리적인 방법은 다음과 같습니다. 학습자가 처음으로 의사결정을 배우는 동안에는 즉각적이고 간단한 피드백을 제공하고, 더 쉬운 사례를 다루게 되면 지연되고 더 자세한 피드백을 제공하는 것입니다. 하지만 이 연구 검토의 결과가 일관되지 않으므로, 이러한 접근 방식을 여러분의 학습자를 대상으로 검증해 보는 것이 좋습니다.

4. 재시도 계획 및 새로운 평가 사례 생성

재시도는 연습에 유용합니다. 구체적인 피드백을 읽고 다시 시도하는 학습자는 피드백을 바탕으로 행동하는 것이므로, 이것이 바로 재시도의 목적입니다. 하지만 동일한 시나리오를 다시 시도하는 것은 대부분 답을 기억하고 있는지 확인하는 것에 그칩니다.

두 개를 떨어뜨려 놓으세요:

• 연습 : 피드백을 통해 재고할 사항을 명시한 후, 동일한 사안에 대해 수정된 시도를 허용합니다.
• 평가: 겉으로 드러나는 이야기는 다르지만 동일한 판단이 필요한 다른 사례를 제시합니다. 학습자가 두 번째 사례를 해결할 수 있다면 추론 능력을 전이한 것이고, 첫 번째 사례만 반복할 수 있다면 암기한 것입니다.

출시 전에 평가 기준을 계획하세요. 규정 준수 한도 위반과 같은 중대한 오류를 정의하고, 다른 곳에서 좋은 점수를 받더라도 이러한 오류가 가려지지 않도록 하세요.

5. 학습자들과 함께 시나리오를 테스트합니다.

출시하기 전에 두 그룹을 대상으로 테스트해 보세요.

해당 분야 전문가 상황이 현실적인지, 결과가 적절한지, 그리고 "최선의" 선택이 타당한지 확인합니다. 경험이 풍부한 두 사람이 서로 다른 선택지를 고르는 경우, 시나리오가 모호하거나 역할에 여러 개의 정답이 있을 수 있는 상황입니다. 어떤 경우인지 판단하여 그에 맞는 피드백을 작성하세요.

대표적인 학습자 몇 명 영상을 보면서 내용을 살펴보세요. 다음과 같은 징후들을 찾아보세요:

• 그들은 지시를 잘 이해하지 못하고 머뭇거려서, 임무 내용이 불분명하다.
• 그들은 그 선택지를 즉시 배제하기 때문에, 그것은 가능성이 낮다.
• 그들은 답을 고르지만 그 이유를 설명할 수 없으므로, 점수 계산에 운이 작용할 수도 있습니다.
• 그들은 피드백 과정을 생략하기 때문에, 피드백이 너무 길거나 너무 일반적입니다.

발견한 문제점을 수정하고, 새로운 시각으로 다시 실행해 보세요.

상호작용적 전달이 도움이 되는 경우

상호작용형 학습 방식은 각 학습자가 그룹 전체의 의견을 보기 전에 선택을 확정할 수 있기 때문에 효과적입니다. 실시간 세션에서는 진행자가 모든 참가자에게 선택을 요청하고, 의견이 어떻게 나뉘었는지 보여준 다음, 아무도 선택하지 않은 옵션에 대해 토론할 수 있습니다. 이러한 시나리오는 혼자 준비하는 학습자를 위한 자기 주도 학습 방식으로도 진행할 수 있습니다. AhaSlides는 상호작용형 학습을 지원하며 실시간 및 자기 주도 학습 방식 간의 전환을 용이하게 합니다. 사용하려는 특정 저작, 피드백 또는 보고 기능은 자체 워크플로와 비교하여 확인하고, AI, 시뮬레이션 및 통합 기능은 작동 여부를 직접 확인하기 전까지는 외부 또는 미확인 기능으로 간주하십시오. 학습 방식 선택에 대한 자세한 내용은 다음을 참조하십시오. 적응형 학습, 상호작용형 학습, 실시간 학습은 언제 사용해야 할까요?.

예시 문제: 환불 결정

예시일 뿐입니다. 이 업무를 수행하는 실무자는 사용 전에 사례와 답변 기준을 검증해야 합니다.

경우. 고객이 배송된 상품이 파손되었다며 전액 환불을 요청했습니다. 학습자의 경우 승인 없이 일정 금액까지만 환불이 가능합니다. 환불 금액이 이 한도를 초과합니다. 담당자는 현재 2시간 동안 회의 중입니다. 사례 기록에 따르면 해당 고객은 올해 네 번 주문했습니다.

학습자에게 요구되는 사항. 어떻게 응답할지 선택하고, 그 이유를 설명하고, 그에 대한 근거를 제시하고, 추가적으로 어떤 정보나 지원이 필요한지 밝히세요.

미온적인 반응입니다. "고객이 불만을 가지고 있으니 환불해 드리겠습니다." 이 답변은 아무런 근거도 제시하지 않고, 환불 한도도 무시하며, 무엇이 부족한지도 언급하지 않습니다.

더욱 강력한 대응. "승인 없이는 제 한도를 초과하여 환불하지 않습니다. 기록을 보니 올해 주문이 네 건이나 있는 것으로 보아 이 고객은 중요한 고객이며, 파손 관련 클레임도 가능성이 높아 보이지만 사진을 아직 보지 못했습니다. 지금 제 한도 내에서 크레딧을 제공하고, 담당자의 답변 시간을 고객에게 알려드린 후, 승인이 신속하게 이루어질 수 있도록 사진을 요청하겠습니다. 파손 배송 건에 대한 별도의 처리 절차가 있는지 확인해 보고 싶습니다."

피드백 후 다시 시도하세요. 즉시 환불을 선택한 학습자는 해당 선택과 관련된 메시지(위 표 참조)를 보고 한 번 더 시도할 수 있습니다. 그런 다음 학습자는 동일한 한도 내에서 배송 지연과 같은 다른 사례를 접하게 되며, 이를 통해 이전 선택이 유효한지 확인할 수 있습니다.

디자이너가 배우는 것. 만약 대부분의 수강생이 즉시 환불을 선택했다면, 수강생들을 탓하기 전에 안내문을 다시 확인해 보세요. 환불 한도가 시나리오에서 명확하게 표시되지 않았을 수도 있습니다.

수정 가능한 평가 기준표

각 기준에 0점에서 2점까지 점수를 매기십시오. 이는 검증된 준비 표준이 아니라, 해당 역할을 수행하는 실무자와 협의하여 조정하기 위한 제안입니다.

앵커 : 0 = 결여 또는 근거 없음. 1 = 부분적이지만 관련 내용이 누락됨. 2 = 합의된 기준에 따라 완전하고 타당성 있음. 학습자의 권한 범위를 벗어난 행위와 같은 중대한 오류는 별도로 정의해야 합니다. 총점은 중대한 오류를 숨겨서는 안 됩니다.

변화된 것을 측정하세요

학습자가 의사결정을 잘 내릴 수 있음을 보여주는 증거가 무엇인지 미리 결정하십시오. 새롭고 이전에 접하지 못한 사례에 대한 성과를 기준선과 비교하고, 선택뿐만 아니라 추론의 질도 살펴보십시오. 미국 질병통제예방센터(CDC)는 학습 평가와 업무 적용 능력 평가를 구분하고, 두 가지 모두를 위한 계획을 세울 것을 권장합니다.CDC, 교육 평가: 효과 측정이는 측정 지침일 뿐, 결과 예측이 아닙니다.

포함 대상, 분모 및 기간을 정의하십시오. 성과가 향상되었다면, 시나리오에 점수를 부여하기 전에 새로운 도구 도입이나 업무 구성 변경 등 같은 기간 동안 발생한 다른 변화를 확인하십시오. 활동과 평가를 연계하는 더 넓은 관점은 저희 가이드를 참조하십시오. 학습 활동을 블룸의 분류 체계에 맞추기.

남아 있을 수 있는 제약 조건

아무리 잘 설계된 시나리오라도 모든 문제를 해결해 주지는 않습니다.

• 연습할 시간이야. 학습자는 재시험과 새로운 사례를 모두 수강할 수 있도록 주중에 여유 시간이 필요합니다.
• 자료의 질이 부실하다. 절차 자체가 불분명하면 어떤 시나리오도 그것을 가르쳐줄 수 없습니다.
• 실제 업무에서의 권위. 학습자가 논리적으로 사고하는 능력이 뛰어나더라도 직장에서 같은 방식으로 행동할 권한이 부족할 수 있습니다.
• 이전. 실습은 안전한 환경에서의 추론 능력을 보여줍니다. 적절한 노출 후 직장에서의 전이 과정을 확인하십시오.

이러한 문제들에 대한 별도의 해결책을 마련하고 후원자에게 알리십시오. 시나리오는 연습 도구일 뿐, 결과를 보장하는 것은 아닙니다.

자주하는 질문

시나리오 기반 학습과 퀴즈의 차이점은 무엇인가요?

퀴즈는 사실 암기력을 확인하는 반면, 시나리오 기반 학습은 학습자에게 현실적인 상황에서 결정을 내리도록 하고 그 결과를 보여주기 때문에 지식뿐 아니라 판단력도 평가합니다.

시나리오의 길이는 어느 정도가 적당할까요?

결정에 필요한 만큼 단계를 추가하세요. 많은 유력한 시나리오에서는 몇 가지 선택지가 있는 하나의 결정만 존재합니다. 후속 결정이 이전 결정에 의존하는 경우에만 단계를 추가하세요.

피드백은 즉각적으로 이루어져야 할까요, 아니면 지연되어야 할까요?

Shute가 검토한 연구에 따르면 즉각적인 피드백은 어려운 새로운 과제에 적합하고, 지연된 피드백은 더 간단한 과제에 대한 전이 효과를 높이는 것으로 나타났습니다. 학습자들에게 두 가지 방법을 모두 적용해 보세요.

어디서 시작하나요

학습자들이 업무에서 잘못 내린 결정 하나를 선택하세요. 권한, 맥락, 정보, 결과라는 네 가지 요소를 적어보세요. 그럴듯한 선택지 세 가지를 추가하고, 각 선택지에 대한 피드백을 작성하세요. 피드백에는 결과와 재고해 볼 질문을 포함해야 합니다. 그런 다음, 더 복잡한 평가를 진행하기 전에 다섯 명의 학습자와 함께 이 피드백을 실행해 보세요.

실제 팀과 함께 시나리오를 실행하고, 이후에도 스스로 속도를 조절하며 의사 결정을 내릴 수 있는 방법을 알아보려면 AhaSlides를 살펴보세요.