Untuk mengukur dampak bisnis dari simulasi peran keterampilan lunak di toko, pisahkan dua set bukti. Beri nilai kemampuan layanan dengan rubrik pada skenario baru, dan lacak tingkat konversi dan ukuran keranjang belanja dari data penjualan Anda. Kemudian bandingkan keduanya dalam periode yang sama, dengan toko atau minggu yang tidak mendapatkan pelatihan, sebelum Anda memberikan nilai tambah pada pelatihan tersebut.
Itu lebih sulit dari yang terlihat, karena toko selalu berubah. Ambil contoh kasus fiktif. Seorang peritel menjalankan simulasi peran di empat toko pada musim gugur. Selama beberapa minggu yang sama, sebuah promosi dimulai, jumlah pengunjung meningkat di dua toko, dan seorang manajer meninggalkan toko ketiga. Konversi meningkat, tetapi tidak ada yang bisa memastikan apakah pelatihan tersebut yang menyebabkannya. Adegan ini hanyalah ilustrasi, bukan pelanggan sungguhan.
Panduan ini ditujukan untuk direktur pelatihan ritel dan manajer operasional toko. Panduan ini mencakup perbandingan, bukti tugas, data operasional, penjelasan lain, dan tata letak pelaporan. Rubrik dan tata letak contoh hanyalah titik awal: mintalah manajer operasional toko untuk menyesuaikannya sebelum penilaian dilakukan.
fakta cepat
| Pertanyaan | Jawaban singkat |
|---|---|
| Apa yang Anda ukur? | Kemampuan layanan (skor rubrik) dan hasil komersial (tingkat konversi, ukuran keranjang belanja), dilaporkan secara terpisah. |
| Apa itu rasio konversi dan ukuran keranjang belanja? | Persentase pengunjung yang melakukan pembelian, dan nilai rata-rata transaksi. |
| Apa yang membuktikan bahwa pelatihan tersebut berhasil? | Kelompok yang sebanding atau peluncuran bertahap, bukan hanya angka sebelum dan sesudah semata. |
| Apa yang sebaiknya tidak Anda janjikan? | Peningkatan spesifik. Laporkan apa yang Anda lihat dan apa yang tidak dapat Anda kesampingkan. |
1. Definisikan hasil dan perbandingannya
Mulailah dengan keputusan yang harus didukung oleh analisis. Apakah Anda memutuskan untuk memperluas permainan peran dari empat toko menjadi empat puluh, merevisi skenario, atau menghentikannya? Tuliskan keputusan tersebut terlebih dahulu, karena hal itu menentukan seberapa kuat bukti yang dibutuhkan.
Kemudian, sebutkan tiga hal:
- Intervensi tersebut. Apa saja yang dibahas dalam permainan peran (salam, penemuan kebutuhan, saran tambahan, menangani keraguan) dan siapa yang menyampaikannya.
- Peran-peran yang terpengaruh. Asisten penjualan, kepala departemen, atau manajer toko yang melatih mereka. Konversi di tingkat toko adalah ukuran yang kurang tepat jika hanya setengah dari staf yang terlatih.
- Perbandingan tersebut. Toko yang terlatih dibandingkan dengan toko serupa yang tidak terlatih, atau toko yang dilatih secara bertahap. Putuskan hal ini sebelum program percontohan dimulai, bukan setelah hasilnya keluar.
Pisahkan biaya penyampaian (waktu pelatih, desain skenario, alat) dari biaya operasional, seperti jam kerja di bagian penjualan yang hilang saat orang berlatih.
2. Mengukur tugas sebenarnya
Ada dua hal yang mudah dikacaukan di sini. Apakah staf menyelesaikan kursus dan menyukainya adalah indikator penyampaian. Apakah mereka dapat melakukan pekerjaan dengan lebih baik adalah kemampuan. Model Kirkpatrick adalah cara yang terkenal untuk membedakan keduanya: model ini memisahkan empat tingkatan evaluasi, mulai dari reaksi dan pembelajaran hingga perilaku dan hasilPenyelesaian dan kepuasan berada di tingkat pertama. Mereka hanya memberi tahu Anda bahwa program berjalan lancar dan tidak lebih dari itu.
Untuk mengukur kemampuan, amati tugas baru berdasarkan rubrik kinerja yang eksplisit. Gunakan skenario yang belum pernah dipraktikkan oleh peserta didik, seperti pelanggan yang mengatakan mereka "hanya melihat-lihat" dan memegang dua produk untuk dibandingkan. Beri nilai respons berdasarkan rubrik (contohnya mengikuti studi kasus) pada dua titik: penilaian awal sebelum program dan penilaian yang sebanding setelahnya.
Jaga agar skenario tetap sebanding: jika kasus lanjutan lebih mudah daripada kasus dasar, skor akan naik karena alasan yang tidak terkait dengan pembelajaran. Pastikan dua penilai memberikan skor yang sama untuk jawaban yang sama sebelum Anda mempercayai angka-angka tersebut. Panduan kami untuk menilai kemampuan pengambilan keputusan dan pemecahan masalah dalam pelatihan Mencakup kalibrasi jangkar dan asesor.
Terakhir, sesuaikan latihan dengan keterampilan. Jika targetnya adalah menerapkan, menganalisis, dan mengevaluasi, kuis mengingat kembali mengukur hal yang salah. Panduan kami untuk Mencocokkan aktivitas pembelajaran dengan taksonomi Bloom menjelaskan cara membaca tuntutan kognitif suatu tugas.
3. Menghubungkan bukti tugas dengan data operasional
Sekarang, masukkan data toko. Definisikan setiap ukuran sehingga siapa pun dapat menghitung ulang:
| Mengukur | Populasi | Penyebut | Periode | sumber |
|---|---|---|---|---|
| Skor rubrik layanan | Staf terlatih dan staf pembanding yang telah dinilai. | Jumlah yang dinilai | Jendela data dasar dan tindak lanjut | Lembar penilaian asesor |
| Tingkat konversi | Toko terlatih dan toko perbandingan | Pengunjung toko (meja kasir atau yang setara) | Minggu yang sama, hari yang sama dalam seminggu | Penghitung pengunjung dan data kasir |
| Ukuran keranjang | Toko terlatih dan toko perbandingan | Transaksi | Minggu yang sama, hari yang sama dalam seminggu | Data pembayaran |
Tiga poin menjaga kejujuran ini.
Tuliskan penyebutnya. Konversi per karyawan memerlukan penghitungan pelanggan yang dilayani oleh setiap orang, yang mana banyak toko tidak mencatatnya. Jika Anda tidak dapat menghitungnya, jangan mengklaimnya.
Carilah kaitan yang masuk akal, bukan bukti. Saran tambahan yang lebih kuat dalam rubrik dan ukuran keranjang belanja yang lebih besar di toko yang sama konsisten dengan keberhasilan pelatihan. Keduanya juga dapat dipengaruhi oleh hal lain, jadi anggap tautan tersebut sebagai petunjuk untuk diuji.
Sajikan kedua set bukti secara berdampingan, jangan pernah dicampuradukkan. Skor "dampak pelatihan" tunggal menyembunyikan bagian mana yang bergerak.
4. Pertimbangkan penjelasan alternatif.
Data ritel sangat bervariasi dari minggu ke minggu. Sebelum menyimpulkan keberhasilan pelatihan, periksa faktor-faktor yang biasanya memengaruhi hasil dalam jendela perbandingan:
- Promosi dan harga. Diskon akan mengubah tingkat konversi dan ukuran keranjang belanja secara otomatis.
- Jumlah pengunjung dan komposisi pelanggan. Minggu yang hujan, acara lokal, atau pergeseran dari sekadar melihat-lihat menjadi pemburu barang murah mengubah siapa yang masuk ke toko.
- Kepegawaian dan beban kerja. Manajer baru, lowongan pekerjaan, atau antrian panjang mengubah jumlah waktu yang dimiliki staf untuk melayani pelanggan.
- Perubahan proses dan tata letak. Sistem kasir baru, tampilan yang berbeda, atau kekurangan stok.
- Musiman. Bandingkan kinerja pada minggu yang sama di toko-toko yang belum terlatih.
Dua desain membantu. A perbandingan yang cocok Metode ini memasangkan setiap toko yang terlatih dengan satu toko yang tidak terlatih dengan ukuran, lokasi, dan pola penjualan yang serupa, kemudian membandingkan bagaimana kesenjangan di antara keduanya berubah. Inilah ide di balik metode perbedaan-dalam-perbedaan (difference-in-differences), yang dikembangkan oleh Bank Dunia. Evaluasi Dampak dalam Praktik menjelaskan dengan bahasa yang sederhana. A peluncuran bertahap Program ini melatih toko-toko secara bertahap, sehingga toko-toko yang masih menunggu bertindak sebagai kelompok pembanding bagi toko-toko yang sudah dilatih, dan pada akhirnya semua toko akan mendapatkan program tersebut.
Jika keduanya tidak memungkinkan, katakan saja: angka sebelum dan sesudah dari satu toko adalah sebuah cerita, bukan perkiraan. Kendalikan komposisi pelanggan dan peluang penjualan sejauh data memungkinkan, dan sebutkan apa yang tidak dapat Anda kendalikan.
5. Laporkan hasil dan pilih tindakan selanjutnya
Tunjukkan kepada pembaca tata letak dengan kolom hasil yang kosong, sehingga strukturnya disepakati sebelum angka apa pun masuk. Isilah hanya dengan data yang sebenarnya.
| Barang | Kelompok terlatih | Kelompok pembanding | Catatan |
|---|---|---|---|
| Staf menilai (n) | |||
| Skor rubrik pada awal penelitian | |||
| Skor rubrik pada tindak lanjut | |||
| Rasio konversi, sebelumnya | |||
| Rasio konversi, setelah | |||
| Ukuran keranjang, sebelumnya | |||
| Ukuran keranjang, setelah | |||
| Perubahan lain pada periode tersebut | |||
| Biaya: pengiriman dan operasional |
Di bawah meja, sebutkan apa yang didukung oleh bukti, apa yang tidak didukung, dan apa yang akan terjadi selanjutnya. Sepakati aturan pengambilan keputusan terlebih dahulu:
- Skala Jika skor rubrik membaik, ukuran komersial bergerak ke arah yang sama terhadap kelompok pembanding, dan tidak ada perubahan lain dalam periode tersebut yang dapat menjelaskannya.
- Merevisi Jika skor rubrik meningkat tetapi ukuran komersial tidak. Keterampilan mungkin telah meningkat tanpa adanya kesempatan bagi staf di area penjualan untuk menggunakannya, yang menunjukkan masalah pada tata letak, staf, atau insentif, bukan pada pelatihan itu sendiri.
- Berhenti atau pikirkan ulang jika tidak ada yang bergerak, atau jika rubrik menunjukkan staf melewatkan langkah penting.
Jika Anda menginginkan pengembalian finansial, ROI Institute adalah jawabannya. Metodologi ROI menambahkan langkah untuk mengisolasi peningkatan yang disebabkan oleh program sebelum diubah menjadi uang dan dikurangkan dari biaya. Bagian 4 di atas mencakup hal yang sama.
Contoh kasus yang telah ditangani beserta umpan balik dan kesempatan untuk mencoba lagi.
Sebagai ilustrasi. Manajer operasional toko harus memvalidasi kasus dan kriteria jawaban sebelum digunakan.
Kasus. Sebuah toko sedang melakukan uji coba permainan peran selama promosi musiman berlangsung dan jumlah pengunjung lebih tinggi dari biasanya. Seorang analis melaporkan bahwa tingkat konversi meningkat di toko yang dilatih dan mempertanyakan apakah program tersebut perlu diterapkan secara luas.
Tugas tersebut. Jelaskan keputusan Anda, sebutkan bukti-bukti yang mendukung, dan nyatakan informasi atau dukungan tambahan apa yang Anda butuhkan.
Upaya pertama. "Tingkat konversi meningkat setelah pelatihan, jadi pelatihannya berhasil. Lanjutkan saja." Peninjau bertanya apa yang terjadi pada toko-toko yang tidak dilatih selama beberapa minggu yang sama, dan apa pengaruh promosi tersebut terhadap jumlah pengunjung. Pihak yang mengikuti pelatihan tidak memiliki jawaban untuk kedua pertanyaan tersebut.
Berikan masukan dan coba lagi. Peninjau menunjukkan bahwa promosi dan perubahan jumlah pengunjung sama-sama memengaruhi konversi, dan meminta peserta didik untuk mengulang tanggapan dengan mempertimbangkan kelompok pembanding.
Upaya yang lebih baik. "Saya belum akan melakukan peningkatan skala. Konversi meningkat di toko yang dilatih, tetapi promosi berjalan pada waktu yang sama. Saya membutuhkan konversi dari dua toko serupa yang belum dilatih untuk minggu yang sama, dan skor rubrik untuk baseline dan tindak lanjut. Jika toko yang dilatih memperoleh lebih banyak daripada toko pembanding dan skornya meningkat, saya akan mendukung peluncuran bertahap untuk mengujinya lagi. Saya juga akan melaporkan ukuran keranjang belanja secara terpisah."
Mengapa setiap respons dapat dipertahankan atau tidak lengkap. Nilailah berdasarkan kriteria yang disepakati, bukan selera penilai. Upaya pertama mencampuradukkan perubahan dengan penyebab dan mengabaikan data yang akan mengujinya, sehingga tidak lengkap. Upaya kedua menyebutkan faktor pengganggu, meminta perbandingan, dan memilih langkah selanjutnya yang dapat diperiksa. Tambahkan varian di mana skor rubrik meningkat tetapi konversi tidak, dan tanyakan kepada kelompok apa yang akan disarankan oleh hal itu.
Contoh rubrik untuk analis atau manajer
Berikan skor untuk setiap kriteria dari 0 hingga 2. Sesuaikan kriteria tersebut dengan manajer operasional toko: ini adalah titik awal yang diusulkan, bukan standar kesiapan yang telah divalidasi.
| Kriterium | 0: tidak ada atau tidak didukung | 1: sebagian, dengan beberapa bagian yang dihilangkan | 2: lengkap dan beralasan |
|---|---|---|---|
| Eksekusi tugas | Melaporkan satu hasil campuran. | Memisahkan ukuran-ukuran tersebut tetapi mengabaikan penyebut atau titik. | Melaporkan kemampuan layanan dan hasil komersial secara terpisah, dengan populasi, penyebut, dan periode. |
| Pemikiran | Klaim timbul dari perubahan sebelum dan sesudah. | Menyebutkan variabel pengganggu tetapi tidak mengujinya. | Menjelaskan kendala, alternatif, dan ketidakpastian, serta menyatakan apa yang akan mengubah kesimpulan. |
| Batas | Melebih-lebihkan hasil atau mengarang ukuran efek. | Memberikan perlindungan secara tidak konsisten. | Menggunakan prosedur yang telah disepakati dan meminta data tambahan jika bukti yang ada kurang memadai. |
Definisikan kesalahan kritis secara terpisah, misalnya menyajikan skor kepuasan sebagai dampak bisnis, atau menjanjikan peningkatan yang tidak ditunjukkan oleh data. Skor keseluruhan tidak boleh menyembunyikan kegagalan kritis.
Di mana penyampaian interaktif membantu
Praktik akan lebih efektif ketika orang berkomitmen pada suatu respons sebelum mereka mendengarkan pendapat kelompok. Dalam sesi langsung, seorang fasilitator dapat menunjukkan skenario pelanggan, meminta setiap orang untuk memilih respons dan mengetikkan alasan satu baris, kemudian mengungkapkan berbagai pilihan sebelum diskusi. Hal itu membuat perbedaan pendapat terlihat, dan di situlah pelatihan yang paling bermanfaat terjadi. Skenario yang sama dapat dijalankan dengan kecepatan sendiri untuk persiapan dan untuk tugas tindak lanjut yang tidak terlihat. AhaSlides, sebuah platform keterlibatan terpadu untuk tim dan ruang kelas, memungkinkan Anda menjalankan kasus yang sama secara langsung dan kemudian menggunakannya kembali sesuai kecepatan Anda sendiri.
Apa yang tidak akan diperbaiki oleh pelatihan?
- Peluang penjualan. Jika toko kekurangan staf, seorang karyawan yang terlatih pun tetap tidak dapat menyapa setiap pelanggan.
- Insentif. Jika staf diberi penghargaan atas kecepatan, mereka tidak akan memperlambat diri untuk menemukan kebutuhan, apa pun kursus yang diajarkan.
Pertanyaan yang sering diajukan
Bagaimana cara mengukur ROI dari pelatihan simulasi peran di bidang ritel?
Bandingkan manfaat dari setiap perubahan dengan biaya penuh, setelah mengisolasi efek pelatihan dari faktor-faktor lain. Gunakan kelompok pembanding atau peluncuran bertahap untuk itu. Hitung biaya pengiriman dan waktu yang dihabiskan di bagian penjualan untuk berlatih.
Apa perbedaan antara rasio konversi dan ukuran keranjang belanja?
Rasio konversi adalah persentase pengunjung yang melakukan pembelian. Ukuran keranjang belanja adalah jumlah uang yang dibelanjakan pelanggan, baik berdasarkan nilai maupun jumlah barang. Pelatihan dapat meningkatkan salah satu tanpa yang lain, jadi lacak keduanya secara terpisah.
Siapa yang harus meninjau rubrik dan kasus ini?
Seorang manajer operasional toko yang mengenal toko-toko Anda, idealnya dengan seseorang dari bagian keuangan atau analitik untuk definisi data.
Mulai dari mana
Pilih satu keterampilan, seperti penemuan kebutuhan, dan tulis satu skenario serta rubrik tiga kriteria. Pilih dua toko yang serupa, latih satu toko, dan beri nilai pada keduanya berdasarkan skenario yang belum pernah dilihat sebelumnya dan sesudah pelatihan. Lacak konversi dan ukuran keranjang belanja untuk kedua toko selama minggu yang sama, dan isi tata letak pelaporan di atas. Kemudian putuskan apakah akan meningkatkan skala, merevisi, atau menghentikan program.
Untuk melihat bagaimana kasus seperti ini dapat dijalankan secara langsung dan digunakan kembali secara mandiri setelahnya, jelajahi AhaSlides.
