수술 역량 평가: 외과 전공의가 독립적인 역량을 갖추었는지 판단하는 방법

항목이 없습니다.
Blog 미리보기 이미지

독립적인 실습 준비 상태는 단 한 번의 점수가 아니라 여러 차례 관찰된 수행 결과를 바탕으로 판단됩니다. 모의 실습 사례 중 하나에서는 좋은 결과를 보였지만 다른 사례에서는 일관성이 없었다면, 이는 분명 어떤 정보를 제공하지만 충분하지는 않습니다. 이 지침서는 의학 교육 책임자 및 레지던트 프로그램 책임자를 위한 것입니다. 평가 대상이 되는 관찰 가능한 과제, 생소하지만 대표적인 사례, 기준점이 있는 관찰 가능한 평가 기준, 평가자 보정 방법, 그리고 결과 활용 방법 등 다섯 가지 결정 사항을 다룹니다. 이 지침서는 임상 지침이 아닌 평가 설계에 관한 것입니다. 독립적인 실습 승인은 각 기관의 자체 절차에 따라 이루어지며, 해당 프로그램의 전문의가 사용 전에 사례와 평가 기준표를 검토해야 합니다.

연구 결과가 말하는 것과 말하지 않는 것

두 가지 발표된 방법이 알아둘 가치가 있습니다. 2005년에 ten Cate는 다음과 같은 방법을 제안했습니다. 위탁 가능한 전문 활동: 감독자가 관찰된 역량을 바탕으로 훈련생이 감독 없이 수행할 수 있다고 판단하는 업무 단위. 1997년 마틴과 그의 동료들은 이를 다음과 같이 설명했습니다. 객관적 구조화 기술 평가 (OSATS)는 외과 레지던트를 위한 작업별 체크리스트와 전반적인 평가 척도를 결합한 도구입니다.

두 가지 모두 판단의 구조를 설명하는 것입니다. 어느 쪽도 특정 연구원이 준비되었다는 것을 보여주거나 전문가의 감독을 대체하는 것은 아닙니다. 이러한 기준들을 바탕으로 평가 기준을 구체화한 다음, 자체 평가자들을 통해 기준을 검증하십시오.

빠른 사실

문제짧은 답변
당신은 무엇을 판단하고 있나요?다수의 관찰된 수행 능력을 바탕으로 한 준비성.
시뮬레이터 점수 1점은 몇 점인가요?하나의 사례일 뿐입니다. 이는 독립적인 진료 활동을 허가하는 것이 아닙니다.
어떤 요소가 기준을 유용하게 만드는가?관찰 가능한 행동 양상과 미흡한 작업, 발전 중인 작업, 숙련된 작업의 예시.
점수의 신뢰성을 높이는 요소는 무엇일까요?평가자들이 독립적으로 점수를 매긴 후, 증거를 비교합니다.
어떤 점수를 피해야 할까요?자신감 아니면 속도.
그것이 결정할 수 없는 것은 무엇일까요?승인. 이는 귀 기관의 자체 절차에 달려 있습니다.

1. 평가 대상 성과를 정의하십시오.

관찰 가능한 과제를 명시하십시오: 여러 차례 관찰된 수행 결과를 바탕으로 준비 상태를 판단합니다. 점수를 정하기 전에 역할, 상황 및 권한 범위를 명확히 하십시오. "독립적 역량"은 전공의마다, 환경마다, 그리고 지도 수준에 따라 다른 의미를 가집니다. 전공의가 누구와 함께 무엇을 하도록 평가받는지, 그리고 준비되었다고 판단되면 어떤 일이 발생하는지 기록하십시오. 저희 가이드를 참조하십시오. 학습 활동을 블룸의 분류 체계에 맞추기 분석이 필요한 작업과 판단이 필요한 작업을 구분하는 데 도움이 됩니다.

2. 익숙하지 않으면서도 대표적인 작업을 선택하세요.

동료가 연습해보지 않은 사례, 예를 들어 실제 사례와 유사한 방식으로 첫 번째 모의 사례와 다른 두 번째 모의 사례를 선택하십시오. 이 사례가 실제 업무를 어떻게 반영하는지, 그리고 무엇을 확인할 수 없는지 설명하십시오. 익숙하지 않은 단일 사례는 기술 전이 여부를 보여줄 수 있지만, 모든 변수, 모든 팀, 모든 복잡한 상황을 포괄할 수는 없습니다. 따라서 최종 결정은 단 하나의 사례가 아니라 여러 사례와 시간에 걸쳐 관찰된 여러 성과를 바탕으로 내려져야 합니다.

3. 관찰 가능한 기준과 앵커를 작성하세요.

평가 기준은 두 가지를 중심으로 설정하세요. 첫째는 사례 간 수행 일관성이고, 둘째는 평가자 간 합의입니다. 각 기준에 대한 점수를 행동 측면에서 어떻게 표현해야 하는지 작성하세요. 예를 들어, 한 기준에 대해서는 다음과 같이 설명할 수 있습니다.

  • 약함(0). 반복적인 안내가 필요하거나, 단계를 놓치거나, 선택 이유를 설명하지 못합니다.
  • 개발 중(1). 업무를 완료하지만, 누락된 부분이 있거나 사례별로 품질이 일관되지 않습니다.
  • 능숙함(2). 과제를 완료하고, 선택 사항을 설명하며, 상황 변화에 대처합니다.

자신감이나 속도에만 기반한 점수 부여는 피하십시오. 자신감 있는 사람도 틀릴 수 있고, 느린 사람도 신중할 수 있습니다. 이러한 특성은 점수와 함께 고려될 수 있지만, 수행된 작업에 대한 증거를 대체해서는 안 됩니다. 평가자가 단계별 과정과 전반적인 품질을 구분하는 데 도움이 된다면, 마틴과 그의 동료들이 제시한 구조, 즉 전반적인 평가와 함께 작업별 체크리스트를 활용하십시오.

4. 평가자 역량 검증 및 시범 운영

보정은 점수를 비교 가능하게 만드는 단계입니다.

  1. 독립적으로 점수를 매기세요. 두 명 이상의 평가자가 서로 대화 없이 동일한 녹화 또는 관찰된 사례를 평가하도록 합니다.
  2. 증거를 비교해 보세요. 각자에게 점수를 매기게 된 근거가 된 상황을 설명해 달라고 요청하세요. 의견 불일치는 대개 모호한 기준에서 비롯됩니다.
  3. 평가 기준을 수정하세요. 문구를 다시 쓰거나 예시를 추가한 다음, 새로운 예시에 점수를 매기세요.
  4. 소규모 그룹 조종사. 의사결정에 사용하기 전에 몇몇 동료들과 함께 평가를 실시하고, 평가자들 간의 의견 차이가 여전히 존재하는지 확인하십시오.

전문가 감독 체계를 설명하십시오. 경계선상의 결과를 검토하는 사람은 누구이며, 최종 결정권자는 누구입니까?

피드백 및 재시도 과정을 포함한 처리된 사례

예시일 뿐입니다. 레지던트 프로그램 책임자와 외과 전문의는 사용 전에 해당 사례와 답변 기준을 검증해야 합니다.

경우. 한 연구원은 모의 사례 중 하나에서는 좋은 성과를 보였지만, 다른 사례에서는 일관성이 부족했습니다.

그 임무. 판사의 준비 상태를 확인하십시오. 결정을 설명하고, 증거를 제시하며, 필요한 추가 정보가 무엇인지 밝히십시오.

첫 시도입니다. "첫 번째 사례에서 높은 점수를 받았으니 준비는 된 것 같네요." 평가자는 두 번째 사례에서는 무슨 일이 있었는지, 평가가 몇 번의 수행을 바탕으로 이루어졌는지, 그리고 두 평가자의 의견이 일치했는지 묻습니다. 학습자는 이 모든 질문에 답하지 못합니다.

피드백 후 다시 시도하세요. 평가자는 높은 점수 하나가 최종 평가로 간주되어 불일치가 무시되었다고 지적합니다. 학습자에게 재고해 볼 것을 요청합니다.

좀 더 나은 시도였습니다. 학습자는 두 가지 사례만으로는 충분하지 않다고 말하며, 두 번째 사례의 일관성 부족을 지적하고 무엇이 달랐는지 묻습니다. 또한, 익숙하지 않은 세 번째 사례에 대한 추가적인 관찰 평가, 독립적인 제2 평가자, 그리고 잘못된 단계에 대한 집중적인 준비를 제안합니다. 학습자는 아직 수료 여부를 결정할 수 없으며, 평가자의 증거, 감독 과정, 그리고 프로그램에서 정의하는 독립적인 실습에 대한 내용이 여전히 필요하다고 말합니다.

각 답변이 타당한지 또는 불완전한지 판단하는 이유. 심사자는 개인적인 선호가 아닌 승인된 기준에 따라 평가해야 합니다. 첫 번째 시도는 하나의 점수를 정답으로 간주하는 치명적인 오류를 범했습니다. 두 번째 시도는 여러 연주를 활용하고, 증거와 추론을 구분하며, 평가의 한계를 명시합니다.

5. 결과를 후속 조치에 활용하십시오.

관찰된 차이에서 다음 단계를 선택하십시오.

  • 체계적인 준비 개념이나 단계가 누락되었을 때.
  • 상호작용 연습 기술은 있지만 일관성이 없을 때.
  • 지도 감독 하의 코칭 동료가 실제 업무에서 피드백이 필요할 때.

계획 재평가를 실시하고 결과가 설명할 수 없는 부분을 명시하십시오. 준비 상태 판단은 특정 시점에서 관찰된 사례에 대한 평가자의 수행 능력을 설명합니다.

표준0: 부재 또는 미지원1: 일부, 누락된 내용 포함2: 완전하고 정당한
작업 실행심사위원들은 한 점수만으로 준비 상태를 판단합니다.여러 점수를 사용하지만 비교하지 않습니다.심사위원들은 여러 차례의 공연 관찰과 기록을 통해 증거를 수집합니다.
추리이유를 제시하지 않습니다.불일치의 원인을 명시하지 않고 이유를 제시합니다.대안, 제약 조건 및 불확실성을 설명합니다.
경계점수를 권한으로 간주합니다.계획 없이 메모를 사용하는 경우 제한 사항이 있습니다.승인된 절차를 따르고 증거가 불충분할 경우 전문가의 의견을 구합니다.

이 평가 기준표는 제안된 출발점일 뿐, 검증된 준비 표준은 아닙니다. 중요한 오류는 별도로 정의해야 하며, 예를 들어 시뮬레이터 점수 하나만을 독립적인 연습을 위한 기준으로 제시할 수 있습니다. 전체 점수가 중요한 실패를 가려서는 안 됩니다.

프로세스를 점검하려면 기준선과 미공개 후속 과제를 비교하십시오. 수행 일관성과 평가자 간 일치도를 측정하십시오. 시작하기 전에 모집단, 분모 및 시기를 정의하고, 교육 이수를 인정하기 전에 새로운 사례 구성이나 평가자 변경과 같은 동시적인 변화를 확인하십시오.

상호작용적 전달이 도움이 되는 경우

상호작용형 형식은 평가 단계의 보정 작업에 도움이 됩니다. 실시간 세션에서는 예시를 보여주고 각 평가자에게 개별적으로 점수를 제출하도록 요청한 다음, 점수 분포를 표시하고 나서 근거를 논의할 수 있습니다. 자기 주도 학습 방식은 평가 기준 검토 및 사전 준비 사항 확인에 적합합니다. AhaSlides팀과 교실을 위한 올인원 참여 플랫폼인 는 상호작용 학습과 실시간 및 자기 주도 학습을 모두 지원합니다. 이 기능을 사용하기 전에 자체 워크플로에서 어떻게 보정 작업을 수행할지 확인하십시오.

역량 평가로 해결할 수 없는 문제

  • 독립에 대한 모호한 정의. 그것이 없으면 점수를 비교할 대상이 없어집니다.
  • 관찰 횟수가 너무 적습니다. 한두 가지 사례만으로는 일관성을 입증할 수 없습니다.
  • 평가 기준을 절대 수정하지 않는 평가자들. 합의는 저절로 나타나지 않습니다.
  • 증거의 한계. 위의 두 자료는 방법이 아니라 동료들을 위한 결과에 대해 설명하고 있습니다.

자주하는 질문

수술 역량 평가란 무엇인가요?

관찰된 수행 능력을 정해진 기준에 비추어 판단하여, 연수생이 프로그램에서 요구하는 수준에 맞춰 특정 수술 작업을 수행할 수 있는지 여부를 결정합니다.

시뮬레이터 점수 하나만으로 준비 상태를 판단할 수 있을까요?

아니요. 그것은 하나의 데이터일 뿐입니다. 준비 상태에 대한 결정은 여러 관찰된 성과와 귀 기관에서 승인한 절차를 바탕으로 이루어집니다.

OSATS란 무엇인가요?

객관적 구조화 기술 평가(OSCA)는 특정 과제에 대한 체크리스트와 전반적인 평가 척도를 결합한 방법입니다.

평가자들이 의견이 일치하는지 어떻게 확인하나요?

학생들이 동일한 예시를 독립적으로 평가하도록 하고, 평가 근거를 비교한 후, 의견이 다른 기준이 있다면 수정하도록 하세요.

누가 사례와 평가 기준표를 검토해야 합니까?

수술 전문의와 레지던트 프로그램 책임자가 점수를 매기기 전에 먼저 논의합니다.

어디서 시작하나요

절차 하나를 선택하고 관찰 가능한 과제를 작성하십시오. 익숙하지 않은 사례 두 개를 선택하여 두 명의 평가자가 각각 독립적으로 점수를 매기고 그 결과를 비교하십시오. 의견이 일치하지 않는 부분은 평가 기준을 수정하고, 최종 결정을 내리기 전에 몇몇 연구원들과 함께 시범 운영을 해보십시오.

보정 세션이 실시간 또는 자율 학습 방식으로 어떻게 진행될 수 있는지 알아보려면 다음을 참조하세요. AhaSlides.

구독하시면 시청자 참여도를 높이는 데 도움이 되는 팁, 통찰력 및 전략을 받아보실 수 있습니다.
감사합니다! 제출이 접수되었습니다!
이런! 양식을 제출하는 중에 문제가 발생했습니다.

다른 게시물을 확인하세요

AhaSlides 포브스 선정 미국 500대 기업에서 사용하고 있습니다. 지금 바로 참여의 힘을 경험해 보세요.

무료로 시작하십시오.
© 2026 AhaSlides 주식회사