Ang kahandaan para sa malayang pagsasanay ay isang paghatol na nabuo mula sa ilang naobserbahang pagganap, hindi isang iskor lamang. Ang isang taong mahusay sa isang kunwaring kaso at hindi pare-pareho sa isa pa ay may sinabi na sa iyo, ngunit hindi sapat. Ang gabay na ito ay para sa mga direktor ng edukasyong medikal at mga pinuno ng programa ng residency. Sinasaklaw nito ang limang desisyon: ang naoobserbahang gawain na tinatasa, isang hindi pamilyar at representatibong kaso, naoobserbahang pamantayan gamit ang mga anchor, kung paano i-calibrate ang mga assessor, at kung paano gamitin ang mga resulta. Ito ay tungkol sa disenyo ng pagtatasa, hindi klinikal na gabay. Ang pahintulot para sa malayang pagsasanay ay nananatili sa sariling mga proseso ng iyong institusyon, at dapat suriin ng isang espesyalista mula sa iyong programa ang kaso at rubric bago gamitin.
Ang sinasabi at hindi sinasabi ng pananaliksik
Dalawang nailathalang pamamaraan ang sulit na malaman. Noong 2005, sampung Cate ang nagpanukala mapagkakatiwalaang mga propesyonal na aktibidad: mga yunit ng trabaho na napagpasyahan ng isang superbisor na maaaring gawin ng isang trainee nang walang superbisyon, batay sa naobserbahang kakayahan. Noong 1997, inilarawan nina Martin at mga kasamahan ang Layunin at Nakabalangkas na Pagtatasa ng Kasanayang Teknikal (OSATS), na nagpapares ng isang checklist na partikular sa gawain at isang pandaigdigang iskala ng rating para sa mga residenteng surgical.
Parehong naglalarawan kung paano bumuo ng istruktura ng paghatol. Hindi ipinapakita ng alinman sa mga ito na handa na ang isang partikular na tao, at hindi rin pinapalitan ng alinman sa mga ito ang espesyalisadong pangangasiwa. Gamitin ang mga ito upang hubugin ang iyong pamantayan, pagkatapos ay subukan ang pamantayan kasama ang iyong sariling mga tagasuri.
Mabilis na katotohanan
| Tanong | Maikling sagot |
|---|---|
| Ano ang hinuhusgahan mo? | Kahandaan, mula sa maraming naobserbahang pagganap. |
| Ano ang isang iskor ng simulator? | Isang punto ng datos. Hindi ito awtorisasyon para sa malayang pagsasagawa. |
| Ano ang nagpapagamit sa pamantayan? | Mga napapansing kilos na may mga halimbawa ng mahina, umuunlad, at mahusay na gawain. |
| Ano ang nagpapatibay sa mga iskor? | Ang mga tagasuri ay nagbibigay ng puntos nang nakapag-iisa, pagkatapos ay naghahambing ng ebidensya. |
| Ano ang dapat mong iwasan sa pag-iskor? | Kumpiyansa o bilis lamang. |
| Ano ang hindi nito kayang pagdesisyunan? | Awtorisasyon. Nakabatay iyan sa proseso ng inyong institusyon. |
1. Tukuyin ang pagganap na tinatasa
Sabihin ang naoobserbahang gawain: paghusga sa kahandaan mula sa maraming naobserbahang pagganap. Tukuyin ang papel, ang konteksto, at ang mga hangganan ng awtorisasyon bago mo tukuyin ang isang iskor. Ang "malayang kakayahan" ay nangangahulugang ibang bagay para sa isang kapwa sa isang pamamaraan, isang setting, at isang antas ng superbisyon kaysa sa iba. Isulat kung ano ang gagawin ng kapwa sa pagtatasa, kanino kasama, at ano ang mangyayari kung sila ay mahatulan na handa. Ang aming gabay sa pagtutugma ng mga aktibidad sa pagkatuto sa taksonomiya ni Bloom tumutulong sa iyo na paghiwalayin ang mga gawaing nangangailangan ng pagsusuri mula sa mga gawaing nangangailangan ng paghatol.
2. Pumili ng isang hindi pamilyar at kinatawan na gawain
Pumili ng isang kaso na hindi pa naeensayo ng kasama, tulad ng pangalawang kunwaring kaso na naiiba sa una sa paraan ng paggawa ng mga totoong kaso. Ipaliwanag kung paano nito sinusuri ang aktwal na gawain, at kung ano ang hindi nito mapatunayan. Ang isang hindi pamilyar na kaso ay maaaring magpakita kung ang mga kasanayan ay nailipat, ngunit hindi nito masasaklaw ang bawat baryasyon, bawat pangkat o bawat komplikasyon. Kaya naman ang desisyon ay nakasalalay sa ilang naobserbahang pagganap, na nakakalat sa iba't ibang kaso at oras, at hindi sa isa lamang.
3. Sumulat ng mga naoobserbahang pamantayan at mga angkla
Bumuo ng pamantayan batay sa dalawang bagay: ang pagkakapare-pareho ng pagganap sa iba't ibang kaso at ang pagkakasundo ng tagasuri. Isulat kung ano ang hitsura ng bawat iskor sa pag-uugali. Para sa isang pamantayan, maaari mong ilarawan:
- Mahina (0). Kailangan ng paulit-ulit na pag-udyok, may nakaligtaan na hakbang o hindi maipaliwanag ang isang pagpipilian.
- Pag-unlad (1). Natatapos ang gawain nang may mga kakulangan o may hindi pare-parehong kalidad sa iba't ibang pagkakataon.
- Mahusay (2). Kinukumpleto ang gawain, ipinapaliwanag ang mga pagpipilian at humahawak ng isang baryasyon sa kaso.
Iwasan ang mga iskor na nakabatay lamang sa kumpiyansa o bilis. Ang isang taong may kumpiyansa ay maaaring magkamali, at ang isang mabagal ay maaaring maging maingat. Ang parehong katangian ay maaaring katabi ng isang iskor, ngunit hindi dapat pumalit sa ebidensya ng kung ano ang nagawa. Gamitin ang istrukturang inilalarawan nina Martin at mga kasamahan, isang checklist na partikular sa gawain sa tabi ng isang pandaigdigang rating, kung makakatulong ito sa iyong mga assessor na paghiwalayin ang mga hakbang mula sa pangkalahatang kalidad.
4. I-calibrate ang mga assessor at magpatakbo ng isang pilot
Ang kalibrasyon ay kung saan nagiging maihahambing ang mga marka:
- Mag-iskor nang mag-isa. Hayaang bigyan ng puntos ng dalawa o higit pang mga tagatasa ang parehong naitalang o naobserbahang halimbawa nang hindi nag-uusap.
- Paghambingin ang ebidensya. Hilingin sa bawat isa na sabihin kung ano ang kanilang nakita na humantong sa iskor. Ang hindi pagkakasundo ay karaniwang nasa isang hindi malinaw na pamantayan.
- Baguhin ang pamantayan. Isulat muli ang mga salita o magdagdag ng halimbawa, pagkatapos ay magbigay ng marka para sa isang bagong halimbawa.
- Pilot sa isang maliit na grupo. Patakbuhin ang pagtatasa kasama ang ilang mga kasama bago ito gamitin para sa mga desisyon, at suriin kung hindi pa rin sumasang-ayon ang mga tagasuri.
Ilarawan ang espesyalisadong pangangasiwa: kung sino ang sumusuri sa mga resulta na halos imposible at kung sino ang may-ari ng pangwakas na desisyon.
Isang napagtagumpayang kaso na may feedback at isang muling pagsubok
Paglalarawan. Dapat patunayan ng pinuno ng programang residency at ng isang espesyalista sa operasyon ang kaso at ang pamantayan sa sagot bago gamitin.
Ang kaso. Mahusay ang pagganap ng isang kapwa sa isang kunwaring kaso ngunit pabago-bago sa iba.
Ang gawain. Husgahan ang kahandaan. Ipaliwanag ang iyong desisyon, banggitin ang ebidensya at sabihin kung anong karagdagang impormasyon ang kailangan mo.
Isang unang pagsubok. "Mataas ang nakuha ng kasama sa unang kaso, kaya handa na sila." Tinanong ng isang tagasuri kung ano ang nangyari sa pangalawang kaso, ilang pagganap ang pinagbabatayan ng hatol, at kung sumang-ayon ang dalawang tagasuri. Walang maisagot ang mag-aaral sa alinman sa mga ito.
Magbigay ng feedback at subukan muli. Binanggit ng tagasuri na ang isang malakas na iskor ay itinuring bilang isang hatol at ang hindi pagkakapare-pareho ay hindi pinansin. Hinihiling sa mag-aaral na muling isaalang-alang.
Isang mas malakas na pagtatangka. Sinasabi ng mag-aaral na hindi sapat ang dalawang kaso, binibigyang-pansin ang hindi pare-parehong pangalawang kaso at tinatanong kung ano ang pagkakaiba nito. Nagmumungkahi sila ng karagdagang naobserbahang pagganap sa ikatlong hindi pamilyar na kaso, isang independiyenteng pangalawang tagasuri, at naka-target na paghahanda sa hakbang na nagkamali. Sinasabi nilang hindi pa nila irerekomenda ang desisyon sa kahandaan, at kung ano pa ang kailangan nila: ang ebidensya ng mga tagasuri, ang proseso ng pangangasiwa at ang kahulugan ng programa ng independiyenteng pagsasagawa.
Kung bakit ang bawat tugon ay maipagtatanggol o hindi kumpleto. Husgahan ang mga naaprubahang pamantayan, hindi ang kagustuhan ng tagasuri. Ang unang pagsubok ay itinuturing ang isang iskor bilang awtorisasyon, na isang kritikal na pagkakamali. Ang pangalawa ay gumagamit ng ilang mga pagganap, pinaghihiwalay ang ebidensya mula sa hinuha at isinasaad ang mga limitasyon ng desisyon.
5. Gamitin ang mga resulta para sa follow-up
Piliin ang susunod na hakbang mula sa naobserbahang puwang:
- Naka-target na paghahanda kapag may kulang na konsepto o hakbang.
- Interactive na pagsasanay kapag nandiyan ang kasanayan ngunit hindi pare-pareho.
- Pinangangasiwaang coaching kapag ang kapwa ay nangangailangan ng feedback sa totoong trabaho.
Magplano ng muling pagtatasa, at sabihin kung ano ang hindi kayang gawin ng resulta: ang paghatol sa kahandaan ay naglalarawan ng pagganap sa mga kasong naobserbahan, kasama ang mga tagasuring kasangkot, sa isang punto ng panahon.
| Saligan | 0: wala o walang suporta | 1: bahagyang, may mga pagkukulang | 2: kumpleto at makatwiran |
|---|---|---|---|
| Pagpapatupad ng gawain | Hinahatulan ang kahandaan mula sa isang iskor. | Gumagamit ng ilang iskor nang hindi pinaghahambing ang mga ito. | Humuhusga mula sa ilang nagmasid na pagtatanghal at itinatala ang ebidensya. |
| pangangatwiran | Hindi nagbibigay ng dahilan. | Nagbibigay ng dahilan nang hindi binabanggit ang hindi pagkakapare-pareho. | Nagpapaliwanag ng mga alternatibo, mga limitasyon, at kawalang-katiyakan. |
| Mga Hangganan | Itinuturing ang isang marka bilang awtorisasyon. | Mga limitasyon sa tala nang walang plano. | Gumagamit ng aprubadong proseso at humihingi ng opinyon ng espesyalista kapag hindi sapat ang ebidensya. |
Ang rubric na ito ay isang iminungkahing panimulang punto, hindi isang napatunayang pamantayan ng kahandaan. Tukuyin nang hiwalay ang mga kritikal na error, halimbawa ang paglalahad ng isang marka ng simulator bilang pahintulot para sa malayang pagsasanay. Hindi dapat itago ng isang pangkalahatang marka ang isang kritikal na pagkabigo.
Para masuri ang proseso, ihambing ang mga baseline at hindi pa nakikitang follow-up na gawain. Sukatin ang pagkakapare-pareho ng pagganap at ang pagkakasundo ng assessor. Tukuyin ang populasyon, denominator, at tiyempo bago ka magsimula, at hanapin ang mga sabay-sabay na pagbabago, tulad ng bagong case mix o pagpapalit ng mga assessor, bago mo i-credit ang pagsasanay.
Kung saan nakakatulong ang interactive na paghahatid
Nakakatulong ang mga interactive na format sa hakbang ng pagkakalibrate. Sa isang live na sesyon, maaari kang magpakita ng isang halimbawa at hilingin sa bawat assessor na magsumite ng iskor nang pribado, pagkatapos ay ipakita ang spread bago talakayin ang ebidensya. Ang self-paced delivery ay umaangkop sa pagsusuri ng pamantayan at mga prerequisite check bago ang proseso. AhaSlides, isang all-in-one na plataporma para sa pakikipag-ugnayan para sa mga pangkat at silid-aralan, ay sumusuporta sa interactive na pagkatuto at parehong live at self-paced na paghahatid. Suriin kung paano mo patatakbuhin ang kalibrasyon sa sarili mong daloy ng trabaho bago ka umasa dito.
Ano ang hindi maaayos ng isang pagtatasa ng kakayahan
- Isang malabong kahulugan ng kalayaan. Kung wala nito, walang maihahambing na mga iskor.
- Napakakaunti ng mga obserbasyon. Hindi maaaring magpakita ng pagkakapare-pareho ang isa o dalawang kaso.
- Mga tagasuri na hindi kailanman nag-calibrate. Ang kasunduan ay hindi lumilitaw nang mag-isa.
- Mga limitasyon ng ebidensya. Ang dalawang sanggunian sa itaas ay naglalarawan ng mga pamamaraan, hindi mga resulta para sa iyong mga kasama.
Mga madalas itanong
Ano ang pagtatasa ng kakayahan sa operasyon?
Kung huhusgahan, mula sa naobserbahang pagganap laban sa mga tinukoy na pamantayan, kung kayang gawin ng isang trainee ang isang tinukoy na gawain sa pag-opera ayon sa pamantayang hinihingi ng iyong programa.
Sapat na ba ang isang iskor ng simulator upang malaman ang kahandaan?
Hindi. Isa lamang itong datos. Ang desisyon sa kahandaan ay nakasalalay sa ilang naobserbahang pagganap at sa inaprubahang proseso ng inyong institusyon.
Ano ang OSATS?
Ang Obhetibong Nakabalangkas na Pagtatasa ng Kasanayang Teknikal, isang pamamaraan na pinagsasama ang isang checklist na partikular sa gawain na may pandaigdigang iskala ng rating.
Paano mo masusuri na sumasang-ayon ang mga assessor?
Ipa-iskor sa kanila ang parehong halimbawa nang mag-isa, ihambing ang kanilang ebidensya, at baguhin ang anumang pamantayan kung saan nagkakaiba ang mga ito.
Sino ang dapat magrepaso ng kaso at rubric?
Isang espesyalista sa operasyon at ang programa ng residency ang mamumuno, bago pa man mabigyan ng marka ang sinuman.
Saan magsisimula
Pumili ng isang pamamaraan at isulat ang naoobserbahang gawain. Pumili ng dalawang hindi pamilyar na kaso, ipa-iskor sa dalawang tagasuri ang bawat isa nang magkahiwalay, at ihambing ang kanilang ebidensya. Baguhin ang mga pamantayan kung saan hindi sila magkasundo, pagkatapos ay subukan muli kasama ang ilang mga kasama bago gamitin ang mga marka para sa anumang desisyon.
Para makita kung paano maaaring tumakbo nang live o ayon sa sarili mong bilis ang isang sesyon ng pagkakalibrate, tuklasin AhaSlides.








