Pengukuran dampak pelatihan manufaktur: bagaimana mengukur pelatihan pemecahan masalah bersamaan dengan waktu henti dan hasil produksi.

Sebuah pabrik mengadakan kursus pemecahan masalah untuk operator mesinnya pada bulan Maret. Pada kuartal yang sama, bagian pemeliharaan menyelesaikan peningkatan proses pada lini pengemasan. Pada bulan Juni, waktu henti yang tidak direncanakan pada lini tersebut menurun. Manajer pabrik mengajukan pertanyaan yang wajar kepada manajer pelatihan: apakah itu karena kursus tersebut?

Ini adalah skenario ilustratif, bukan kasus pelanggan yang terdokumentasi. Namun, masalah ini umum terjadi. Pelatihan dan perubahan operasional terjadi bersamaan, dan angka-angka tidak dapat memberi tahu Anda mana yang memicu perubahan tersebut. Panduan ini ditujukan untuk manajer pelatihan pabrik dan pimpinan pemeliharaan atau kualitas yang bekerja sama dengan mereka. Panduan ini menunjukkan cara menghubungkan kemampuan pemecahan masalah yang diamati dengan ukuran operasional, cara membaca hubungan tersebut secara jujur, dan apa yang harus dilaporkan. Kasus, skor, dan ambang batas harus divalidasi oleh orang-orang yang memiliki peralatan Anda.

Apa itu pengukuran dampak pelatihan manufaktur?

Ini adalah praktik memeriksa apakah program pelatihan telah mengubah kemampuan orang dalam mengerjakan tugas, dan kemudian apakah perubahan tersebut terlihat dalam data operasional seperti waktu henti dan hasil produksi, menggunakan perbandingan yang membuat hubungan tersebut kredibel. Metode ini menggabungkan dua jenis bukti: kinerja tugas (dapatkah operator mendiagnosis kesalahan?) dan pengukuran pabrik (apakah penghentian atau limbah berubah?). Metode ini tidak menganggap peningkatan pada satu aspek sebagai bukti untuk aspek lainnya.

fakta cepat

1. Definisikan hasil dan perbandingannya

Sebelum kursus dimulai, tuliskan tiga hal.

1. Keputusan. Analisis ini akan membantu seseorang dalam memutuskan apa: memperluas program, merevisinya, atau menghentikannya? Rencana pengukuran tanpa keputusan yang menyertainya menghasilkan laporan yang tidak digunakan siapa pun.
2. Intervensi dan peran. Operator, teknisi, dan pemimpin shift mana yang termasuk dalam cakupan pelatihan ini, dan apa sebenarnya yang dilatihkan kepada mereka? Pelatihan pemecahan masalah yang mengajarkan operator untuk membaca riwayat alarm dan memeriksa hal-hal yang murah dan aman terlebih dahulu berbeda dengan pelatihan yang mengajarkan teknisi untuk menyetel sensor.
3. Perbandingan tersebut. Dibandingkan dengan apa? Basis data mereka sendiri, lini yang belum dilatih, atau lini yang sama pada tahun sebelumnya?

Selain itu, ada juga biaya terpisah. Biaya pelaksanaan adalah biaya yang dikeluarkan untuk menjalankan program: waktu desain, waktu fasilitator, peralatan. Biaya operasional adalah biaya yang dikeluarkan pabrik: operator yang tidak beroperasi, meja kerja yang tidak digunakan. Jika Anda berencana untuk membahas pengembalian investasi, keduanya harus dimasukkan dalam perhitungan. ROI Institute menjelaskan Metodologi ROI-nya., yang menambahkan langkah untuk mengisolasi efek program sebelum mengubah hasil menjadi uang. Anda tidak perlu mengadopsinya sepenuhnya, tetapi pertanyaannya tepat.

2. Mengukur tugas sebenarnya

Tingkat penyelesaian dan skor kepuasan menggambarkan proses pengiriman. Simpan data tersebut, beri label sebagai indikator pengiriman, dan jangan menawarkannya sebagai bukti dampak.

Ukuran yang terkait dengan pabrik adalah kinerja tugas. Gunakan bukti yang dapat diamati dari keterampilan yang ditargetkan oleh kursus:

1. Garis dasar. Sebelum pelatihan, beri nilai setiap operator pada kasus kesalahan yang aman, seperti kasus digital dengan riwayat alarm dan beberapa pembacaan yang dapat mereka minta, menggunakan rubrik penilaian.
2. Penilaian yang sebanding setelah pelatihan. Gunakan kasus berbeda dengan tingkat kesulitan yang sama, sehingga Anda mengukur keterampilan dan bukan hafalan jawaban pertama. Panduan kami untuk menguji keterampilan pemecahan masalah operator mesin secara objektif Mencakup cara menyusun kasus dan kunci jawaban.
3. Cek transfer. Tanyakan apakah perilaku tersebut muncul dalam pekerjaan nyata setelah jangka waktu yang sesuai, misalnya dalam tinjauan keputusan perbaikan kerusakan terbaru oleh kepala bagian pemeliharaan.

The Model Kirkpatrick adalah peta yang berguna: reaksi, pembelajaran, perilaku, dan hasil. Berdasarkan pengalaman kami, program sering kali melaporkan dua level pertama dan kemudian menunjuk ke level keempat. Hubungan antara keduanya, perilaku di tempat kerja, adalah di mana bukti cenderung menipis. Untuk kasus umum, lihat panduan kami tentang mengukur pelatihan di luar penyelesaian kursus.

Sedikit penjelasan tentang tuntutan kognitif. Mendiagnosis penyebab mana yang sesuai dengan gejala adalah analisis, dan menilai tindakan mana yang tepat adalah evaluasi. Panduan kami untuk Mencocokkan aktivitas pembelajaran dengan taksonomi Bloom Menjelaskan cara mencocokkan pengujian dengan tuntutan ini. Gunakan Bloom untuk mendesain tugas. Jangan menggunakannya untuk memprediksi waktu henti: tingkat yang lebih tinggi pada pengujian adalah deskripsi tentang apa yang diminta oleh tugas, bukan perkiraan tentang apa yang akan dilihat pabrik.

3. Menghubungkan bukti tugas dengan data operasional

Sekarang, bandingkan kedua jenis bukti tersebut. Dua angka yang paling berperan adalah perubahan skor tugas, dan perubahan tingkat waktu henti yang sebanding.

Untuk setiap pengukuran pada tanaman, tentukan empat hal sebelum Anda melihat hasilnya.

1. Populasi. Lini mana, shift mana, dan mesin mana? Angka waktu henti untuk seluruh lokasi tidak banyak memberi tahu Anda tentang satu tim terlatih.
2. Penyebut. Jumlah menit berhenti per jam operasional terjadwal, atau jumlah berhenti per seribu siklus, bukan total mentah. Jalur produksi yang beroperasi dua kali lebih lama akan berhenti lebih lama tanpa perubahan keterampilan.
3. Periode. Jangka waktu sebelum dan sesudah pelatihan sama, dengan beberapa minggu pertama setelah pelatihan diperlakukan secara terpisah agar orang-orang dapat beradaptasi.
4. Sumber. Dari mana angka tersebut berasal, seperti catatan perawatan, catatan penghentian mesin itu sendiri, atau sistem mutu, dan siapa pemiliknya.

Pilihlah ukuran yang sesuai dengan keahlian. OEE (efektivitas peralatan secara keseluruhan) Sistem ini menggabungkan ketersediaan, kinerja, dan kualitas. Faktor ketersediaannya menghitung kejadian yang menghentikan produksi yang direncanakan, dan faktor kualitasnya menghitung komponen yang tidak memenuhi standar, termasuk pengerjaan ulang. Kedua hal tersebut sesuai dengan dua hal yang menjadi perhatian panduan ini: waktu henti dan hasil (persentase output yang baik). Perhatikan komponen-komponennya daripada angka OEE tunggal, karena serangkaian pemecahan masalah lebih mungkin untuk mengurangi penghentian yang tidak direncanakan daripada, misalnya, pergantian yang direncanakan, dan merata-ratakannya akan menyembunyikan sinyal tersebut. Faktor kinerjanya juga menangkap penghentian kecil dan proses yang lambat, yang dapat disembunyikan oleh penghentian yang lebih singkat dalam data ketersediaan.

Kemudian jelaskan hubungan yang masuk akal dalam satu kalimat yang dapat Anda pertahankan. Misalnya: "Operator yang mengurutkan pemeriksaan dari yang murah ke yang mahal seharusnya dapat menyelesaikan penghentian kecil lebih cepat, sehingga kami memperkirakan penghentian tak terencana yang lebih singkat di jalur pengemasan." Itu adalah hipotesis dengan mekanisme. "Skor naik dan waktu henti turun" adalah korelasi, dan tetap menjadi korelasi sampai Anda menyingkirkan penjelasan alternatif lainnya.

4. Pertimbangkan penjelasan alternatif.

Telusuri perubahan apa lagi yang terjadi di jendela perbandingan. Mulailah dengan daftar ini.

• Perubahan proses atau peralatan. Dalam skenario kita, peningkatan perawatan adalah hal yang paling jelas. Begitu juga dengan sensor baru, perubahan resep, atau film atau material baru.
• Beban kerja dan bauran produk. Kuartal yang lebih tenang atau produk yang lebih sederhana dapat mengurangi penghentian produksi tanpa perubahan keterampilan.
• Kepegawaian. Karyawan baru, karyawan yang keluar, lembur, dan perubahan pola kerja semuanya memengaruhi waktu istirahat.
• Kebijakan dan wewenang. Jika operator diberi izin untuk menyelidiki kerusakan, hal itu saja dapat mempersingkat waktu berhenti.
• Perubahan pengukuran. Cara pencatatan halte yang baru dapat mengubah angka-angka tersebut dalam semalam.

Dua desain membantu. A peluncuran bertahap Kereta api mengoperasikan satu jalur atau shift terlebih dahulu dan jalur atau shift serupa kemudian, sehingga jalur kedua berfungsi sebagai perbandingan sementara menunggu. A perbandingan yang cocok Pendekatan ini memasangkan operator terlatih dengan operator yang tidak terlatih pada mesin dan produk yang serupa. Namun, tidak selalu ada solusi yang memungkinkan: lini produksi berbeda, kru berganti, dan pabrik mungkin tidak ingin menunda pelatihan untuk sebuah pengujian. Jika tidak ada yang cocok, nyatakan demikian, dan laporkan hasilnya sebagai kontribusi yang masuk akal di samping perubahan lainnya, bukan sebagai ukuran efek.

Penelitian tentang pelatihan teknisi menunjukkan mengapa tugas tersebut penting. Schaafstal, Schraagen, dan van Berlo membuat kursus yang menggabungkan strategi pemecahan masalah umum dengan uraian fungsional peralatan. Dalam evaluasi mereka, teknisi yang dilatih dengan cara ini menyelesaikan sekitar dua kali lebih banyak kerusakan dalam waktu yang lebih singkat daripada mereka yang diajarkan dengan cara tradisional.Schaafstal dan rekan-rekannya, 2000Para peserta adalah teknisi dalam evaluasi terstruktur, bukan operator di jalur produksi langsung, jadi anggaplah ini sebagai alasan untuk mengukur tugas tersebut, bukan sebagai angka yang diharapkan.

5. Laporkan hasil dan pilih tindakan selanjutnya

Laporkan tabel kecil dengan cara yang sama setiap kuartal. Berikut adalah tata letak dengan kolom hasil yang kosong. Sel-sel tersebut sengaja dikosongkan: ukuran efek yang dibuat-buat lebih buruk daripada tidak ada sama sekali.

Kemudian pilih tindakan selanjutnya berdasarkan bukti yang ada, yang telah disepakati sebelum Anda melihat angka-angkanya.

• Skala Jika skor tugas meningkat pada kasus yang belum pernah dilihat sebelumnya, pemeriksaan transfer menunjukkan perilaku pada jalur tersebut, dan ukuran pabrik bergerak ke arah yang diharapkan dibandingkan dengan perbandingan atau dengan penjelasan alternatif yang dikesampingkan.
• Merevisi Jika skor meningkat tetapi perilaku antrean tidak berubah, yang biasanya menunjukkan adanya masalah pada otoritas, alat bantu, atau tekanan waktu, bukan pada kursus itu sendiri.
• Berhenti atau pikirkan ulang jika skor tidak meningkat, atau jika ukuran tanaman berubah tanpa ada penjelasan dalam data tugas.

Rubrik sederhana dengan tiga kriteria, yang diberi skor dari 0 hingga 2, menjaga agar skor tugas tetap bermakna.

Titik acuan: 0 berarti tidak ada atau tidak didukung, 1 berarti sebagian dengan kelalaian yang relevan, dan 2 berarti lengkap dan dibenarkan berdasarkan kriteria yang disepakati. Definisikan kesalahan kritis secara terpisah, seperti tindakan yang tidak aman, sehingga total yang baik tidak dapat menyembunyikan satu kesalahan. Ini adalah titik awal yang diusulkan, bukan standar kesiapan yang divalidasi. Panduan kami untuk menilai kemampuan pengambilan keputusan dan pemecahan masalah dalam pelatihan Mencakup kalibrasi asesor dan penulisan acuan.

Di mana penyampaian interaktif membantu

Nilai tugas hanya sebaik praktik yang mendasarinya. Dalam sesi yang difasilitasi, Anda dapat menunjukkan riwayat alarm, meminta setiap operator untuk berkomitmen pada pemeriksaan pertama yang akan mereka lakukan, kemudian menunjukkan sebaran data sebelum mendiskusikannya. Kasus yang sama dapat dijalankan secara mandiri setelahnya, dengan pertanyaan terbuka mengenai alasan yang dinilai oleh dua penilai. AhaSlides Mendukung pembelajaran interaktif dan perpindahan antara penyampaian langsung dan mandiri. Periksa fungsi pembuatan konten, umpan balik, atau pelaporan apa pun yang Anda rencanakan untuk diandalkan terhadap alur kerja Anda sendiri, dan perlakukan simulator, AI, dan integrasi sistem sebagai eksternal atau belum terkonfirmasi sampai Anda melihatnya berfungsi. Jika kursus Anda juga mencakup pekerjaan berbasis peringatan, panduan kami untuk Melatih teknisi pemeliharaan untuk menafsirkan peringatan AI prediktif. Menunjukkan cara menerapkan pendekatan yang sama, yaitu mengutamakan tugas.

Apa yang tidak akan diperbaiki oleh hal ini

• Kendala yang tetap ada setelah keterampilan meningkat. Kurangnya suku cadang, tidak adanya wewenang untuk melakukan investigasi, dan jalur produksi yang lebih menghargai hasil daripada diagnosis akan membatasi dampak positifnya.
• Sampel kecil. Satu garis di atas seperempat bagian dapat menunjukkan pola, tetapi jarang membuktikan penyebabnya.
• Transfer lambat. Keterampilan membutuhkan waktu berminggu-minggu untuk terlihat dalam data pengereman.
• Penyimpangan penilai. Skor akan kembali berbeda jika penilai berhenti melakukan perbandingan.
• Data dasar hilang. Jika jumlah pemberhentian tidak pernah dicatat secara konsisten, mulailah mencatat sekarang dan ukur dari sana.

Sebutkan hal-hal ini kepada sponsor sejak dini dan sepakati siapa yang akan memperbaiki masing-masing masalah tersebut.

Pertanyaan yang sering diajukan

Apa itu pengukuran dampak pelatihan manufaktur?

Hal ini dilakukan untuk memeriksa apakah pelatihan mengubah kinerja tugas dan kemudian apakah ukuran-ukuran pabrik seperti waktu henti dan hasil panen berubah, menggunakan perbandingan yang mendukung hubungan tersebut.

Bisakah skor pengujian memprediksi waktu henti (downtime)?

Tidak. Skor menunjukkan apa yang dapat dilakukan operator pada tugas yang aman. Waktu henti bergantung pada banyak hal lain, jadi gunakan skor sebagai salah satu bukti dan bandingkan dengan data pabrik.

Langkah-langkah operasional apa yang sebaiknya Anda gunakan?

Pilihlah yang mendekati keahlian dan tentukan populasi, penyebut, periode, dan sumbernya. Menit berhenti yang tidak direncanakan per jam kerja dan tingkat pengerjaan ulang adalah titik awal yang umum.

Bagaimana cara memisahkan pelatihan dari peningkatan proses?

Bandingkan dengan jalur atau pergeseran serupa yang belum dilatih, atau lakukan peluncuran secara bertahap. Jika itu tidak memungkinkan, laporkan perubahan lain di samping hasilnya dan jelaskan sebagai kontribusi yang masuk akal.

Mulai dari mana

Pilih satu baris dan satu ukuran, misalnya menit berhenti yang tidak direncanakan per jam operasional. Tuliskan perubahan lain yang direncanakan pada kuartal berikutnya. Mintalah seorang pemimpin pemeliharaan untuk menulis kasus kesalahan dasar dan kasus tindak lanjut yang sesuai, dan mintalah dua penilai untuk menilai lima respons secara independen. Perbaiki kriteria di mana mereka tidak sepakat, kemudian buat tabel pelaporan di atas dengan kolom-kolomnya kosong dan isi saat bukti tiba.

Untuk melihat bagaimana kasus kesalahan seperti ini dapat dijalankan secara langsung dan digunakan kembali secara mandiri setelahnya, jelajahi AhaSlides.