Penilaian kompetensi bedah: bagaimana menentukan kapan seorang peserta pelatihan bedah telah mencapai kompetensi mandiri.

Tidak ada item yang ditemukan.
Blog gambar kecil

Kesiapan untuk praktik mandiri merupakan penilaian yang dibangun dari beberapa kinerja yang diamati, bukan hanya satu skor. Seorang peserta pelatihan yang berkinerja baik pada satu kasus simulasi dan tidak konsisten pada kasus lain telah memberi tahu Anda sesuatu, tetapi tidak cukup. Panduan ini ditujukan untuk direktur pendidikan kedokteran dan pimpinan program residensi. Panduan ini mencakup lima keputusan: tugas yang dapat diamati yang dinilai, kasus yang tidak familiar dan representatif, kriteria yang dapat diamati dengan acuan, cara mengkalibrasi penilai, dan cara menggunakan hasilnya. Ini tentang desain penilaian, bukan panduan klinis. Otorisasi untuk praktik mandiri tetap berada dalam proses institusi Anda sendiri, dan seorang spesialis dari program Anda harus meninjau kasus dan rubrik sebelum digunakan.

Apa yang dikatakan dan tidak dikatakan oleh penelitian.

Ada dua metode yang telah dipublikasikan yang patut diketahui. Pada tahun 2005, ten Cate mengusulkan aktivitas profesional yang dapat dipercayakan: unit kerja yang diputuskan oleh seorang supervisor bahwa seorang peserta pelatihan dapat lakukan tanpa pengawasan, berdasarkan kompetensi yang diamati. Pada tahun 1997, Martin dan rekan-rekannya mendeskripsikan hal tersebut. Penilaian Terstruktur Objektif Keterampilan Teknis (OSATS), yang menggabungkan daftar periksa khusus tugas dengan skala penilaian global untuk dokter bedah residen.

Keduanya menjelaskan cara menyusun penilaian. Tidak satu pun menunjukkan bahwa seseorang sudah siap, dan tidak satu pun menggantikan pengawasan spesialis. Gunakan keduanya untuk membentuk kriteria Anda, lalu uji kriteria tersebut dengan penilai Anda sendiri.

fakta cepat

PertanyaanJawaban singkat
Apa yang sedang kamu nilai?Kesiapan, berdasarkan beberapa penampilan yang diamati.
Berapakah skor satu simulator?Satu poin data. Ini bukan otorisasi untuk praktik mandiri.
Apa yang membuat kriteria tersebut dapat digunakan?Perilaku yang dapat diamati beserta contoh pekerjaan yang lemah, berkembang, dan mahir.
Apa yang membuat skor dapat dipercaya?Penilai memberikan skor secara independen, kemudian membandingkan bukti yang ada.
Apa yang sebaiknya Anda hindari untuk dicetak?Kepercayaan diri atau kecepatan saja.
Apa yang tidak bisa diputuskannya?Otorisasi. Itu tergantung pada proses internal institusi Anda.

1. Definisikan kinerja yang dinilai

Nyatakan tugas yang dapat diamati: menilai kesiapan dari beberapa kinerja yang diamati. Tentukan peran, konteks, dan batasan otorisasi sebelum Anda menetapkan skor. "Kompetensi independen" memiliki arti yang berbeda bagi seorang peserta pelatihan dalam satu prosedur, satu pengaturan, dan satu tingkat pengawasan dibandingkan dengan yang lain. Tuliskan apa yang dinilai untuk dilakukan oleh peserta pelatihan, dengan siapa, dan apa yang terjadi jika mereka dinilai siap. Panduan kami untuk Mencocokkan aktivitas pembelajaran dengan taksonomi Bloom Membantu Anda memisahkan tugas yang perlu dianalisis dari tugas yang perlu dinilai.

2. Pilih tugas yang tidak familiar dan representatif.

Pilihlah sebuah kasus yang belum pernah dilatih oleh peserta, misalnya kasus simulasi kedua yang berbeda dari kasus pertama seperti halnya kasus nyata. Jelaskan bagaimana kasus tersebut merupakan contoh dari pekerjaan sebenarnya, dan apa yang tidak dapat dibuktikan. Satu kasus yang tidak dikenal dapat menunjukkan apakah keterampilan dapat ditransfer, tetapi tidak dapat mencakup setiap variasi, setiap tim, atau setiap komplikasi. Itulah mengapa keputusan didasarkan pada beberapa kinerja yang diamati, yang tersebar di berbagai kasus dan waktu, dan bukan hanya pada satu kasus.

3. Tuliskan kriteria dan acuan yang dapat diamati.

Susun kriteria berdasarkan dua hal: konsistensi kinerja di seluruh kasus dan kesepakatan penilai. Tuliskan bagaimana setiap skor terlihat dalam perilaku. Untuk satu kriteria, Anda dapat menjelaskan:

  • Lemah (0). Membutuhkan arahan berulang, melewatkan satu langkah, atau tidak dapat menjelaskan suatu pilihan.
  • Mengembangkan (1). Menyelesaikan tugas dengan beberapa kekurangan atau kualitas yang tidak konsisten di berbagai kasus.
  • Mahir (2). Menyelesaikan tugas, menjelaskan pilihan, dan menangani variasi dalam kasus tersebut.

Hindari penilaian yang hanya berdasarkan kepercayaan diri atau kecepatan. Orang yang percaya diri bisa saja salah, dan orang yang lambat bisa jadi berhati-hati. Kedua sifat tersebut dapat dicantumkan di samping nilai, tetapi tidak boleh menggantikan bukti dari apa yang telah dilakukan. Gunakan struktur yang dijelaskan oleh Martin dan rekan-rekannya, yaitu daftar periksa khusus tugas di samping penilaian global, jika hal itu membantu penilai Anda memisahkan langkah-langkah dari kualitas keseluruhan.

4. Kalibrasi penilai dan jalankan uji coba.

Kalibrasi adalah tahap di mana skor menjadi dapat dibandingkan:

  1. Berikan nilai secara independen. Mintalah dua atau lebih penilai untuk memberikan skor pada contoh yang direkam atau diamati yang sama tanpa berbicara.
  2. Bandingkan bukti-bukti tersebut. Mintalah masing-masing untuk mengatakan apa yang mereka lihat yang menyebabkan skor tersebut. Perbedaan pendapat biasanya terletak pada kriteria yang ambigu.
  3. Revisi kriteria tersebut. Ubah susunan kalimat atau tambahkan contoh, lalu beri nilai pada contoh baru tersebut.
  4. Menjadi pilot dalam kelompok kecil. Lakukan penilaian dengan beberapa orang sebelum menggunakannya untuk pengambilan keputusan, dan periksa apakah para penilai masih berbeda pendapat.

Jelaskan pengawasan spesialis: siapa yang meninjau hasil yang berada di ambang batas dan siapa yang memiliki keputusan akhir.

Contoh kasus yang telah ditangani beserta umpan balik dan kesempatan untuk mencoba lagi.

Sebagai contoh. Pimpinan program residensi dan spesialis bedah harus memvalidasi kasus dan kriteria jawaban sebelum digunakan.

Kasus. Seseorang menunjukkan performa yang baik pada satu kasus simulasi tetapi tidak konsisten pada kasus simulasi lainnya.

Tugas tersebut. Kesiapan hakim. Jelaskan keputusan Anda, sebutkan bukti-bukti yang ada, dan nyatakan informasi tambahan apa yang Anda butuhkan.

Upaya pertama. "Siswa tersebut mendapat nilai tinggi pada kasus pertama, jadi mereka sudah siap." Seorang penilai bertanya apa yang terjadi pada kasus kedua, berapa banyak penampilan yang menjadi dasar penilaian, dan apakah kedua penilai sepakat. Siswa tersebut tidak memiliki jawaban untuk semua pertanyaan itu.

Berikan masukan dan coba lagi. Penilai mencatat bahwa satu nilai tinggi diperlakukan sebagai vonis dan inkonsistensi diabaikan. Peserta didik diminta untuk mempertimbangkan kembali.

Upaya yang lebih baik. Peserta didik menyatakan bahwa dua kasus tidak cukup, mencatat kasus kedua yang tidak konsisten dan bertanya apa yang berbeda di dalamnya. Mereka mengusulkan pengamatan lebih lanjut terhadap kinerja pada kasus ketiga yang tidak dikenal, seorang asesor kedua yang independen, dan persiapan yang terarah pada langkah yang salah. Mereka mengatakan bahwa mereka belum akan merekomendasikan keputusan kesiapan, dan apa yang masih mereka butuhkan: bukti dari para asesor, proses pengawasan, dan definisi praktik independen dari program tersebut.

Mengapa setiap respons dapat dipertahankan atau tidak lengkap. Nilailah berdasarkan kriteria yang telah disetujui, bukan preferensi penilai. Upaya pertama memperlakukan satu skor sebagai otorisasi, yang merupakan kesalahan fatal. Upaya kedua menggunakan beberapa penampilan, memisahkan bukti dari kesimpulan, dan menyatakan batasan keputusan.

5. Gunakan hasil tersebut untuk tindak lanjut

Pilih langkah selanjutnya dari kesenjangan yang diamati:

  • Persiapan yang terarah ketika suatu konsep atau langkah hilang.
  • Praktik interaktif ketika keahliannya ada tetapi tidak konsisten.
  • Pelatihan yang diawasi ketika rekan tersebut membutuhkan umpan balik dalam pekerjaan nyata.

Rencanakan penilaian ulang, dan nyatakan apa yang tidak dapat dilakukan oleh hasilnya: penilaian kesiapan menggambarkan kinerja pada kasus-kasus yang diamati, dengan penilai yang terlibat, pada satu titik waktu.

Kriterium0: tidak ada atau tidak didukung1: sebagian, dengan beberapa bagian yang dihilangkan2: lengkap dan beralasan
Eksekusi tugasKesiapan juri dinilai dari satu skor.Menggunakan beberapa skor tanpa membandingkannya.Para juri mengamati beberapa pertunjukan dan mencatat bukti-bukti yang ada.
PemikiranTidak memberikan alasan.Memberikan alasan tanpa menyebutkan inkonsistensi.Menjelaskan alternatif, kendala, dan ketidakpastian.
BatasMenganggap skor sebagai otorisasi.Catatan terbatas tanpa rencana.Menggunakan proses yang telah disetujui dan mencari masukan dari ahli jika bukti yang ada tidak mencukupi.

Rubrik ini merupakan titik awal yang diusulkan, bukan standar kesiapan yang telah divalidasi. Definisikan kesalahan kritis secara terpisah, misalnya dengan menyajikan satu skor simulator sebagai otorisasi untuk praktik mandiri. Skor keseluruhan tidak boleh menyembunyikan kegagalan kritis.

Untuk memeriksa prosesnya, bandingkan tugas dasar dan tugas tindak lanjut yang belum pernah dilihat sebelumnya. Ukur konsistensi kinerja dan kesepakatan penilai. Tentukan populasi, penyebut, dan waktu sebelum Anda mulai, dan perhatikan perubahan yang terjadi bersamaan, seperti campuran kasus baru atau perubahan penilai, sebelum Anda memberikan kredit untuk pelatihan tersebut.

Di mana penyampaian interaktif membantu

Format interaktif membantu dalam langkah kalibrasi. Dalam sesi langsung, Anda dapat menunjukkan contoh dan meminta setiap penilai untuk mengirimkan skor secara pribadi, kemudian menampilkan sebaran sebelum membahas bukti. Penyampaian mandiri sesuai untuk tinjauan kriteria dan pemeriksaan prasyarat sebelumnya. AhaSlides, sebuah platform keterlibatan terpadu untuk tim dan ruang kelas, mendukung pembelajaran interaktif dan penyampaian secara langsung maupun mandiri. Periksa bagaimana Anda akan menjalankan kalibrasi dalam alur kerja Anda sendiri sebelum Anda mengandalkannya.

Apa yang tidak akan diperbaiki oleh penilaian kompetensi

  • Definisi kemerdekaan yang tidak jelas. Tanpa itu, skor tidak memiliki tolok ukur untuk dibandingkan.
  • Jumlah pengamatan terlalu sedikit. Satu atau dua kasus saja tidak dapat menunjukkan konsistensi.
  • Penilai yang tidak pernah melakukan kalibrasi. Kesepakatan tidak muncul dengan sendirinya.
  • Keterbatasan bukti. Kedua sumber di atas menjelaskan metode, bukan hasil untuk rekan-rekan Anda.

Pertanyaan yang sering diajukan

Apa itu penilaian kompetensi bedah?

Menilai, berdasarkan pengamatan kinerja terhadap kriteria yang telah ditentukan, apakah seorang peserta pelatihan dapat melakukan tugas bedah tertentu sesuai dengan standar yang dipersyaratkan oleh program Anda.

Apakah satu skor simulator saja cukup untuk menentukan kesiapan?

Tidak. Itu hanya satu titik data. Keputusan kesiapan didasarkan pada beberapa kinerja yang diamati dan proses yang disetujui oleh institusi Anda.

Apa itu OSATS?

Objective Structured Assessment of Technical Skill (OSSA), sebuah metode yang menggabungkan daftar periksa spesifik tugas dengan skala penilaian global.

Bagaimana cara Anda memastikan bahwa para penilai sepakat?

Minta mereka untuk menilai contoh yang sama secara independen, bandingkan bukti mereka, dan revisi kriteria apa pun yang menunjukkan perbedaan.

Siapa yang harus meninjau kasus dan rubriknya?

Seorang spesialis bedah dan kepala program residensi, sebelum ada yang dinilai.

Mulai dari mana

Pilih satu prosedur dan tuliskan tugas yang dapat diamati. Pilih dua kasus yang tidak dikenal, minta dua penilai untuk memberi skor pada masing-masing kasus secara independen, dan bandingkan bukti mereka. Revisi kriteria jika mereka tidak sepakat, lalu lakukan uji coba dengan beberapa rekan sebelum menggunakan skor tersebut untuk pengambilan keputusan apa pun.

Untuk melihat bagaimana sesi kalibrasi dapat dijalankan secara langsung atau dengan kecepatan sendiri, jelajahi AhaSlides.

Berlangganan untuk mendapatkan kiat, wawasan, dan strategi untuk meningkatkan keterlibatan audiens.
Terima kasih! Kiriman Anda telah diterima!
Ups! Ada yang tidak beres saat mengirimkan formulir.

Lihat posting lainnya

AhaSlides Digunakan oleh 500 perusahaan teratas versi Forbes Amerika. Rasakan kekuatan keterlibatan hari ini.

Mulai gratis
© 2026 AhaSlides Pte Ltd