Ocena kompetencji chirurgicznych: jak ustalić, kiedy stażysta chirurgiczny osiągnął niezależną kompetencję

Nie znaleziono przedmiotów.
Blog miniatura

Gotowość do samodzielnej praktyki to ocena oparta na kilku obserwowanych wynikach, a nie na jednym wyniku. Osoba, która dobrze wypada w jednym symulowanym przypadku, a niespójnie w innym, powiedziała Ci coś, ale to za mało. Ten poradnik jest przeznaczony dla dyrektorów ds. kształcenia medycznego i kierowników programów rezydentury. Obejmuje on pięć decyzji: obserwowalne zadanie podlegające ocenie, nieznany i reprezentatywny przypadek, obserwowalne kryteria z punktami odniesienia, sposób kalibracji asesorów oraz sposób wykorzystania wyników. Dotyczy on projektu oceny, a nie wytycznych klinicznych. Autoryzacja do samodzielnej praktyki pozostaje w gestii procedur obowiązujących w Twojej instytucji, a specjalista z Twojego programu powinien zapoznać się z przypadkiem i rubryką oceny przed jego wykorzystaniem.

Co mówią badania, a czego nie mówią

Warto poznać dwie opublikowane metody. W 2005 roku dziesięć Cate zaproponowało powierzone czynności zawodowe: jednostki pracy, które przełożony decyduje, że stażysta może wykonywać samodzielnie, na podstawie zaobserwowanych kompetencji. W 1997 roku Martin i współpracownicy opisali Obiektywna, ustrukturyzowana ocena umiejętności technicznych (OSATS), który łączy listę kontrolną dotyczącą konkretnych zadań z globalną skalą ocen dla rezydentów chirurgii.

Oba opisują, jak formułować osąd. Żaden z nich nie pokazuje, czy dana osoba jest gotowa, i żaden nie zastępuje nadzoru specjalistów. Wykorzystaj je do ukształtowania swoich kryteriów, a następnie przetestuj je z własnymi asesorami.

Szybkie fakty

QuestionKrótka odpowiedź
Co oceniasz?Gotowość na podstawie wielu obserwowanych wyników.
Czym jest jeden wynik symulatora?Jeden punkt danych. Nie jest to zezwolenie na niezależną praktykę.
Co sprawia, że ​​kryteria są użyteczne?Obserwowalne zachowania wraz z przykładami pracy słabej, rozwijającej się i zaawansowanej.
Co sprawia, że ​​wyniki są wiarygodne?Oceniający oceniają niezależnie, a następnie porównują dowody.
Czego nie należy punktować?Tylko pewność siebie lub szybkość.
O czym nie może zdecydować?Autoryzacja. To jest kwestia regulowana przez procedurę obowiązującą w Twojej instytucji.

1. Zdefiniuj wydajność podlegającą ocenie

Określ obserwowalne zadanie: ocenę gotowości na podstawie wielu obserwowanych wyników. Określ rolę, kontekst i granice uprawnień, zanim zdefiniujesz punktację. „Niezależna kompetencja” oznacza coś innego dla osoby w jednej procedurze, jednym środowisku i na jednym poziomie nadzoru niż dla innej. Zapisz, co osoba jest oceniana, z kim i co się stanie, jeśli zostanie uznana za gotową. Nasz przewodnik po dopasowywanie działań edukacyjnych do taksonomii Blooma pomaga oddzielić zadania wymagające analizy od tych, które wymagają oceny.

2. Wybierz nieznane, reprezentatywne zadanie

Wybierz przypadek, którego kolega nie przećwiczył, na przykład drugi symulowany przypadek, który różni się od pierwszego tym, co robią rzeczywiste przypadki. Wyjaśnij, w jaki sposób próbkuje on rzeczywistą pracę i czego nie jest w stanie ustalić. Pojedynczy, nieznany przypadek może pokazać, czy umiejętności się przenoszą, ale nie obejmie każdej odmiany, każdego zespołu ani każdej komplikacji. Dlatego decyzja opiera się na kilku zaobserwowanych wynikach, rozłożonych na różne przypadki i czas, a nie na jednym.

3. Zapisz obserwowalne kryteria i punkty zaczepienia

Stwórz kryteria oparte na dwóch rzeczach: spójności wyników w różnych przypadkach i zgodności oceniających. Opisz, jak każda ocena prezentuje się w kontekście zachowania. W przypadku jednego kryterium możesz opisać:

  • Słaby (0). Wymaga wielokrotnego podpowiadania, pomija krok lub nie potrafi wyjaśnić wyboru.
  • Rozwijanie (1). Wykonuje zadanie z pominięciami lub nierówną jakością w różnych przypadkach.
  • Biegły (2). Wykonuje zadanie, wyjaśnia wybory i zajmuje się wariantem w danym przypadku.

Unikaj ocen opartych wyłącznie na pewności siebie lub szybkości. Osoba pewna siebie może się mylić, a powolna może być ostrożna. Obie cechy mogą być porównywalne z oceną, ale nie powinny zastępować dowodów na to, co zostało zrobione. Skorzystaj ze struktury opisanej przez Martina i współpracowników – listy kontrolnej dla poszczególnych zadań obok oceny globalnej – jeśli pomoże to asesorom oddzielić poszczególne kroki od ogólnej jakości.

4. Skalibruj asesorów i przeprowadź pilotaż

Kalibracja to moment, w którym wyniki stają się porównywalne:

  1. Zdobądź niezależne punkty. Poleć dwóm lub więcej asesorom ocenę tego samego nagranego lub zaobserwowanego przykładu bez rozmowy.
  2. Porównaj dowody. Poproś każdego z nich, aby opowiedział, co zaobserwowali i co doprowadziło do takiego wyniku. Różnica zdań zazwyczaj leży w niejednoznacznym kryterium.
  3. Zrewiduj kryterium. Przepisz sformułowanie lub dodaj przykład, a następnie oceń nowy przykład.
  4. Pilot w małej grupie. Przed podjęciem decyzji przeprowadź ocenę z kilkoma osobami i sprawdź, czy oceniający nadal mają odmienne zdanie.

Opisz nadzór specjalistyczny: kto dokonuje przeglądu wyników granicznych i kto jest odpowiedzialny za ostateczną decyzję.

Przypadek rozwiązany z informacją zwrotną i ponowną próbą

Przykład. Kierownik programu rezydentury i specjalista chirurgii powinni zweryfikować przypadek i kryteria odpowiedzi przed ich użyciem.

Walizka. Ktoś radzi sobie dobrze w jednym symulowanym przypadku, ale niespójnie w innym.

Zadanie. Oceniaj gotowość sędziowską. Uzasadnij swoją decyzję, przytocz dowody i powiedz, jakich dodatkowych informacji potrzebujesz.

Pierwsza próba. „W pierwszym przypadku uczeń uzyskał wysoki wynik, więc są gotowi”. Recenzent pyta, co wydarzyło się w drugim przypadku, na podstawie ilu wystąpień opiera się ocena i czy obaj asesorzy się zgodzili. Uczeń nie zna odpowiedzi na żadne z tych pytań.

Prześlij opinię i spróbuj ponownie. Recenzent zauważa, że ​​jedna wysoka ocena została potraktowana jako werdykt, a niespójność została zignorowana. Uczeń jest proszony o ponowne przemyślenie swojej decyzji.

Silniejsza próba. Uczeń stwierdza, że ​​dwa przypadki to za mało, odnotowuje niespójny drugi przypadek i pyta, co w nim było innego. Proponuje dalszą obserwację wyników w trzecim, nieznanym przypadku, niezależnego drugiego asesora oraz ukierunkowane przygotowanie do kroku, który się nie powiódł. Twierdzi, że nie rekomenduje jeszcze decyzji o gotowości, a czego jeszcze potrzebuje: dowodów od asesorów, procesu nadzoru oraz definicji niezależnej praktyki w programie.

Dlaczego każda odpowiedź jest możliwa do obrony lub niekompletna. Oceniaj na podstawie zatwierdzonych kryteriów, a nie preferencji recenzenta. Pierwsza próba traktuje jedną ocenę jako autoryzację, co jest błędem krytycznym. Druga próba wykorzystuje kilka wyników, oddziela dowody od wniosków i określa granice decyzji.

5. Wykorzystaj wyniki do dalszych działań

Wybierz następny krok z zaobserwowanej luki:

  • Skierowane przygotowanie gdy brakowało jakiegoś konceptu lub kroku.
  • Praktyka interaktywna gdy umiejętność istnieje, ale jest niestabilna.
  • Nadzorowany coaching gdy pracownik potrzebuje informacji zwrotnej na temat rzeczywistej pracy.

Zaplanuj ponowną ocenę i określ, czego wynik nie może zrobić: ocena gotowości opisuje wyniki osiągnięte w obserwowanych przypadkach, w tym przez oceniających, w danym momencie.

Kryterium0: nieobecny lub nieobsługiwany1: częściowy, z pominięciami2: kompletne i uzasadnione
Wykonanie zadaniaGotowość sędziów na podstawie jednego wyniku.Używa kilku wyników bez ich porównywania.Sędziowie oceniają wyniki kilku obserwowanych występów i zapisują dowody.
RozumowanieNie podaje powodu.Podaje powód bez wytykania niespójności.Wyjaśnia alternatywy, ograniczenia i niepewność.
GraniceTraktuje wynik jako autoryzację.Limity notatek bez planu.Stosuje zatwierdzoną procedurę i zwraca się o opinię specjalistów, gdy dowody są niewystarczające.

Ta rubryka stanowi proponowany punkt wyjścia, a nie sprawdzony standard gotowości. Błędy krytyczne należy definiować oddzielnie, na przykład przedstawiając jeden wynik symulatora jako upoważnienie do samodzielnej praktyki. Wynik ogólny nigdy nie może ukrywać krytycznego błędu.

Aby sprawdzić proces, porównaj zadania bazowe i niewidoczne zadania następcze. Zmierz spójność wyników i zgodność asesorów. Zdefiniuj populację, mianownik i harmonogram przed rozpoczęciem, a przed zaliczeniem szkolenia sprawdź, czy nie zaszły jakieś zmiany, takie jak nowa konfiguracja przypadków lub zmiana asesorów.

Gdzie interaktywna dostawa pomaga

Formaty interaktywne ułatwiają etap kalibracji. Podczas sesji na żywo możesz pokazać przykład i poprosić każdego asesora o prywatne przesłanie oceny, a następnie wyświetlić rozkład przed omówieniem dowodów. Tempo pracy dostosowane do indywidualnych potrzeb pozwala na wcześniejsze sprawdzenie kryteriów i warunków wstępnych. AhaSlides, kompleksowa platforma do angażowania zespołów i sal lekcyjnych, obsługuje interaktywną naukę oraz zajęcia na żywo i w tempie własnym. Sprawdź, jak przeprowadzisz kalibrację w swoim własnym procesie pracy, zanim zaczniesz na niej polegać.

Czego ocena kompetencji nie naprawi

  • Niejasna definicja niezależności. Bez niego wyniki nie mają się z czym porównywać.
  • Zbyt mało obserwacji. Jeden lub dwa przypadki nie mogą być dowodem spójności.
  • Asesorzy, którzy nigdy nie kalibrują. Umowa nie pojawia się sama w sobie.
  • Ograniczenia dowodowe. Oba powyższe źródła opisują metody, a nie wyniki dla twoich towarzyszy.

PYTANIA I ODPOWIEDZI

Czym jest ocena kompetencji chirurgicznych?

Ocenianie, na podstawie zaobserwowanych wyników w porównaniu z określonymi kryteriami, czy stażysta potrafi wykonać określone zadanie chirurgiczne zgodnie ze standardem wymaganym przez program.

Czy jeden wynik symulatora wystarczy, aby ocenić gotowość?

Nie. To tylko jeden punkt danych. Decyzja o gotowości opiera się na kilku obserwowanych wynikach i zatwierdzonym procesie w Twojej instytucji.

Czym jest OSATS?

Obiektywna, ustrukturyzowana ocena umiejętności technicznych, metoda łącząca listę kontrolną dotyczącą konkretnego zadania z globalną skalą ocen.

Jak sprawdzić, czy asesorzy się zgadzają?

Niech niezależnie ocenią ten sam przykład, porównają dowody i poprawią kryteria, w których występują różnice.

Kto powinien dokonać przeglądu przypadku i rubryki oceny?

Zanim ktokolwiek zostanie oceniony, musi zostać wybrany specjalista chirurgii i kierownik programu rezydentury.

Gdzie zacząć

Wybierz jedną procedurę i zapisz zadanie obserwowalne. Wybierz dwa nieznane przypadki, poproś dwóch asesorów o niezależne ocenienie każdego z nich i porównaj ich dowody. Zrewiduj kryteria w miejscach, gdzie się nie zgadzają, a następnie przeprowadź pilotaż z kilkoma osobami, zanim wykorzystasz wyniki do podjęcia jakiejkolwiek decyzji.

Aby zobaczyć, jak sesja kalibracji może przebiegać na żywo lub w tempie indywidualnym, zapoznaj się z informacjami AhaSlides.

Subskrybuj, aby otrzymywać wskazówki, spostrzeżenia i strategie zwiększające zaangażowanie odbiorców.
Dziękuję Ci! Twoje zgłoszenie zostało odebrane!
Ups! Coś poszło nie tak podczas przesyłania formularza.

Sprawdź inne posty

AhaSlides jest używany przez 500 największych firm w Ameryce według Forbesa. Przekonaj się o sile zaangażowania już dziś.

Rozpocznij za darmo
© 2026 AhaSlides Pte spółka z ograniczoną odpowiedzialnością