Natapos ang isang pilot program. Labindalawang tao ang lumahok, halos lahat sila ay nagsabing ito ay kapaki-pakinabang at nasiyahan ang facilitator. Pagkatapos, ang pinuno ng mga operasyon ay nagtanong ng isang makatwirang tanong: "Mayroon bang ibang gumanap ng kanilang trabaho nang iba?" Walang sumukat kung paano nagtrabaho ang mga tao bago ang pilot program, walang nagkumpara sa kanila sa sinuman, at binago ng pangkat ang proseso nito sa parehong buwan. Ang pilot program ay nagpakita ng mabuting kalooban, hindi ebidensya.
Ito ay isang naglalarawang senaryo, hindi isang dokumentadong kaso ng customer. Ipinapakita nito ang isang karaniwang paraan kung paano nagkakamali ang pagsusuri sa mga programa sa pagsasanay: ang pilot ay pinapatakbo, ngunit hindi ito kailanman idinisenyo upang sagutin ang isang tanong.
Ang gabay na ito ay para sa mga pinuno ng L&D, mga tagadisenyo ng instruksyon, at mga tagapamahala ng pagsasanay. Saklaw nito ang limang hakbang: tukuyin ang pilot question, pumili ng mga kalahok at mga baseline measure, itala ang paglalakbay sa pagkatuto, tasahin ang pagganap at paglilipat ng bagong gawain, at sumang-ayon kung paano makakaapekto ang mga resulta sa paglulunsad. Nagtatapos ito sa isang template na maaari mong iakma at ang mga limitasyong natitira.
Ano ang isang piloto sa pagsasanay?
Ang isang training pilot ay isang maliit, limitado sa oras na pagpapatakbo ng isang disenyo ng pagkatuto bago mo ito isagawa nang malawakan. Ang trabaho nito ay alamin kung ang disenyo ay magagawa at kung ano ang sulit na ituloy, hindi para patunayan na gumagana ito sa lahat ng dako.
Mahalaga ang pagkakaibang iyan. Inilalarawan ng US National Center for Complementary and Integrative Health ang isang pilot study bilang isang maliit na pagsubok sa mga pamamaraan at pamamaraan na gagamitin sa mas malaking saklaw, at nagbabala na ang isang pilot study ay walang kapangyarihang sumagot sa mga tanong tungkol sa bisa, kaya ang anumang epektong tila ipinapakita nito ay hindi matatag (NCCIH, Mga Pilot Studies: Mga Karaniwang Gamit at Maling Paggamit). Ang patnubay na iyan ay isinulat para sa pananaliksik sa kalusugan, ngunit ang lohika ay nananatili. Ang isang pilot na binubuo ng labindalawang tao ay makapagsasabi sa iyo kung maaari kang magrekrut, maghatid, sumukat at mag-follow up. Hindi nito masasabi sa iyo, nang may kumpiyansa, kung gaano kalaki ang magiging epekto nito sa buong organisasyon.
Mabilis na katotohanan
| Tanong | Maikling sagot |
|---|---|
| Para saan ang isang piloto? | Pagsubok sa mga pagpapalagay sa pagkatuto at paghahatid bago ang pag-scale. |
| Ano ang kailangan mo bago ito magsimula? | Isang tanong na maaaring subukan, isang gawain, isang baseline, at pamantayan sa pagpapasya. |
| Ano ang maituturing na ebidensya ng paglilipat? | Pagganap sa isang bagong gawain pagkatapos ng pagkakalantad sa trabaho, hindi kasiyahan. |
| Kailangan mo ba ng control group? | Hindi palagi. Nakakatulong ang isang grupong naghahambing o unti-unting paglulunsad kapag ito ay magagawa at patas. |
| Kailan mo itinatakda ang mga pamantayan sa pagpapasya? | Bago mo tingnan ang anumang resulta. |
| Ano ang hindi kayang sabihin sa iyo ng piloto? | Gaano kalaki ang magiging epekto sa malawakang saklaw. |
1. Tukuyin ang pangunahing tanong
Magsimula sa isang tanong na maaaring sagutin ng oo o hindi, o gamit ang isang numero, at pangalanan ang desisyong maibibigay nito.
Isang mahinang tanong: "Gumagana ba ang bagong programa sa onboarding?" Isang masusubok na tanong: "Pagkatapos ng muling idinisenyong programa sa onboarding, kaya ba ng mga bagong nagsisimula na pangasiwaan ang isang karaniwang pagtaas ng customer nang walang tulong, at praktikal ba ang pilot na ito na maihatid gamit ang oras ng coaching na mayroon tayo?"
Isulat ang tatlong bagay:
- Ang gawain. Ano ang magagawa ng mga tao na hindi nila nagawa, o hindi nila nagawa nang maayos, noon?
- Ang desisyon. Babaguhin mo ba ang disenyo, magpapatakbo ng isa pang pilot program, o ilulunsad ito nang mas malawakan?
- Ang mga pagpapalagay sa pagkatuto at paghahatid. Ano ang iyong palagay tungkol sa mga kinakailangan, oras, kapasidad sa pagtuturo, at mga kagamitang dapat subukan ng piloto?
Kung hindi mo matukoy ang desisyon, hindi ka pa handang simulan ang pilot. Darating ang resulta nang walang naghihintay na kumilos.
2. Pumili ng mga kalahok at mga pangunahing hakbang
Ang baseline ay ebidensya kung paano isinasagawa ng mga tao ang gawain bago ang pagsasanay. Kung wala ito, ang "pagbuti" ay walang maihahambing.
Pumili ng mga kalahok nang may pag-iingat. Pumili ng mga taong gagawa ng tunay na gawain at kamukha ng grupong plano mong pagsama-samahin. Ang isang pilot program na may mga pinakamasipag na boluntaryo lamang ang makakapagpaganda sa disenyo.
Kunin ang baseline. Gamitin ang parehong uri ng panukat na gagamitin mo pagkatapos, upang maihambing ang dalawa. Kabilang sa mga opsyon ang isang maikling sample ng trabaho, isang nakabalangkas na obserbasyon, isang pagsusuri ng mga kamakailang output o isang kaso na may iskor. Itala kung sino ang kasama, ilan ang karapat-dapat at kailan ka nagsukat.
Mag-isip ng isang paghahambing. Ang pinakamatibay na disenyo ay naghahambing sa mga taong kumuha ng pilot test sa mga katulad na taong hindi. Hindi ito laging posible o patas, lalo na kapag ang pagsasanay ay kinakailangan para sa kaligtasan o pagsunod. Ang unti-unting paglulunsad ay isang praktikal na alternatibo: isang grupo ang magsisimula ngayon, ang katulad na grupo ay magsisimula mamaya, at ang susunod na grupo ay magsisilbing paghahambing para sa una. Anuman ang piliin mo, sabihin sa plano kung bakit ito patas sa mga kasangkot.
3. Ihatid at itala ang paglalakbay sa pagkatuto
Magiging kapaki-pakinabang lamang ang ebidensya kung alam mo kung ano ang naihatid. Magtago ng isang malinaw na talaan ng nangyari, dahil ang gastos at pagsisikap sa paghahatid ay bahagi ng kung ano ang sinusubukan ng mga pilot test.
Itala:
- Paghahanda Ano ang ginawa ng mga tao bago ang mga sesyon, at gaano katagal ito?
- Practice. Aling mga kaso o pagsasanay ang kanilang pinaghirapan, at ano ang feedback na kanilang natanggap?
- Pagtuturo Sino ang nag-coach, gaano katagal, at ito ba ay live o asynchronous?
- Mga pagbabago sa operasyon. Anumang bagay na nagbago noong pilot program, tulad ng isang bagong tool, pagbabago sa patakaran, pana-panahong pagmamadali, o pagpapalit ng manager.
- Pagsasaayos at mga gastos ng produkto. Ang aktwal na setup na ginamit mo, at ang oras at perang ginugol para maihatid.
Ang huling dalawa ang pinakamahalaga para sa desisyon sa paglulunsad. Ang isang disenyo na gagana lamang sa antas ng coaching na hindi mo kayang bayaran sa malawakang saklaw ay nagturo sa iyo ng isang bagay na mahalaga, at ang talaan ang nagpapakita nito.
4. Suriin ang pagganap at paglilipat ng bagong gawain
Ang pagsusuri ng pagsasanay ay kadalasang inilalarawan gamit ang apat na antas ng modelo ng Kirkpatrick: reaksyon, pagkatuto, pag-uugali at mga resulta (Mga Kasosyo sa Kirkpatrick). Dapat umabot ang isang piloto nang lampas sa unang antas. Ang reaksyon, kung ito man ay kapaki-pakinabang para sa mga tao, ay mabilis na maintindihan ngunit kakaunti ang nagsasabi kung sila ay gaganap nang naiiba.
Subukan ang pagkatuto sa isang bagong gawain. Bigyan ang mga kalahok ng isang kaso na hindi pa nila naisasagawa, at bigyan ito ng marka gamit ang parehong pamantayan na ginamit mo noong baseline. Ipinapakita ng isang bagong gawain kung mailalapat ng mga tao ang kanilang natutunan, hindi kung naaalala nila ang isang halimbawa.
Pagsubaybay pagkatapos ng pagkakalantad sa trabaho. Ang paglilipat ay nangangahulugang paglalapat ng natutunan sa trabaho, at pagpapanatili nito sa paglipas ng panahon. Ang madalas na binabanggit na pagsusuri nina Baldwin at Ford noong 1988 ay tumutukoy sa paglilipat bilang parehong paglalahat ng natutunang materyal sa trabaho at pagpapanatili nito sa paglipas ng panahon, at tinitingnan kung paano ito naaapektuhan ng disenyo ng pagsasanay, mga katangian ng trainee at ang kapaligiran sa trabaho (Baldwin at Ford, 1988Kaya magplano ng follow-up pagkatapos magkaroon ng totoong trabaho ang mga tao, halimbawa pagkalipas ng ilang linggo, at sukatin muli ang parehong gawain.
Mga hadlang sa rekord. Kung may hindi gumagamit ng bagong pamamaraan sa trabaho, tanungin kung bakit. Ang sagot ay maaaring isang nawawalang kagamitan, isang tagapamahala na umaasa sa lumang pamamaraan o masyadong kaunting oras. Ito ay mga natuklasan tungkol sa kapaligiran sa trabaho, hindi mga pagkabigo ng nag-aaral.
Huwag mahinuha ang paglilipat mula sa kasiyahan. Sulit itala ang isang mahusay na feedback score. Hindi nito ipinapakita na nagbago ang pag-uugali.
5. Magpasya kung paano nakakaapekto ang mga resulta sa paglulunsad
Isulat ang mga pamantayan sa pagpapasya bago mo tingnan ang mga resulta. Kung hindi, madaling makahanap ng dahilan para magpatuloy sa anumang nakikita mo.
Isang simpleng istruktura:
| Kung ipinapakita ng piloto | pagkatapos |
|---|---|
| Bumuti ang pagganap ng gawain, naantala ang paglilipat, at naging posible ang paghahatid | Magplano ng mas malawak na paglulunsad at patuloy na sumukat. |
| Bumuti ang pagganap ng gawain, ngunit naharangan ng kapaligiran sa trabaho ang paglilipat | Ayusin ang harang, pagkatapos ay patakbuhin ang pangalawang pilot. |
| Kaunting pagbabago sa bagong gawain | Baguhin ang disenyo bago ang anumang karagdagang operasyon. |
| Hindi naging epektibo ang gastos sa paghahatid o oras ng pagtuturo | Baguhin ang disenyo kung paano ito ihahatid, pagkatapos ay subukan muli. |
Maging tapat tungkol sa kung ano ang kayang suportahan ng isang maliit na grupo. Ituring ang mga numero bilang indikasyon lamang, iulat ang laki ng grupo at ang denominador, at iwasan ang mga effect size o garantiya. Sabihin kung aling iba pang mga pagbabago ang nangyari nang sabay bago mo i-credit ang pagsasanay.
Isang template ng pagsukat ng piloto
Paglalarawan. Dapat itong repasuhin ng isang practitioner na gumagawa ng gawaing ito bago gamitin.
| seksyon | Ano ang isusulat |
|---|---|
| Tanong ng piloto | Ang tanong na maaaring subukin at ang desisyong ibinibigay nito. |
| Gawain | Ang bagong gawain na dapat gampanan ng mga tao, at kung paano ito bibigyan ng marka. |
| Mga Kalahok | Sino-sino ang kasama, ilan ang karapat-dapat at anumang grupo ng paghahambing. |
| Baseline | Ang sukat, ang petsa at ang mga marka bago ang pagsasanay. |
| Paglalakbay sa pagkatuto | Paghahanda, pagsasanay, pagtuturo, oras at gastos. |
| Mga sabay-sabay na pagbabago | Anumang iba pang nagbago noong pilot episode. |
| Resulta ng bagong gawain | Mga iskor sa isang gawain na hindi isinagawa noong pilot test. |
| Pag-asikaso | Timing, kung sino ang naabot, at mga score pagkatapos ng work exposure. |
| Mga hadlang | Ano ang pumigil sa mga taong nag-aaplay ng mga natutunan. |
| criteria desisyon | Ang mga limitasyon na itinakda mo bago suriin ang mga resulta. |
| Kalalabasan | Rebisahin, subukan muli, o ilunsad, at bakit. |
Kung saan nakakatulong ang interactive na paghahatid
Ang mga interactive na format ay angkop sa yugto ng pagsasanay ng isang pilot dahil ang bawat tao ay nangangako sa isang sagot bago makita ang sagot ng grupo, na nagbibigay sa iyo ng talaan ng pangangatwiran sa halip na pagdalo lamang. Maaaring patakbuhin ng isang facilitator ang isang kaso nang live, at ang parehong kaso ay maaaring gamitin nang mag-isa para sa paghahanda o follow-up. Sinusuportahan ng AhaSlides ang interactive na pag-aaral at paglipat sa pagitan ng live at self-paced na paghahatid. Suriin ang anumang partikular na function ng pag-author, feedback o pag-uulat na plano mong asahan laban sa iyong sariling daloy ng trabaho, at ituring ang mga tampok ng AI, simulation at integration bilang external o unconfirmed hanggang sa makita mo ang mga ito na gumagana. Para pumili sa pagitan ng mga format, tingnan ang kailan gagamit ng adaptive, interactive, at live learningPara itugma ang mga aktibidad sa pag-iisip na gusto mong sukatin, tingnan ang aming gabay sa pagtutugma ng mga aktibidad sa pagkatuto sa Bloom's Taxonomy.
Mga limitasyon na maaaring manatili
Kahit ang isang mahusay na dinisenyong piloto ay nag-iiwan ng ilang mga bagay na hindi nalutas:
- Maliit na numero. Ipinapakita ng isang piloto ang posibilidad at direksyon, hindi kung gaano kalaki ang magiging epekto nito sa malawakang saklaw.
- Kapaligiran sa trabaho. Maaaring mahusay ang pagganap ng mga tao sa bagong gawain ngunit hindi pa rin ito magagamit sa trabaho kahit na may iba pang itinuturo ang kanilang manager, mga kagamitan, o mga insentibo.
- Timing. Ang isang follow-up pagkatapos ng ilang linggo ay hindi nagpapakita kung ano ang natitira pagkatapos ng anim na buwan.
- Kasabay na pagbabago. Ang iba pang mga pagbabago sa parehong panahon ay maaaring magpaliwanag ng ilan sa mga pagpapabuti.
- Pagpili. Ang mga taong nagboluntaryo ay maaaring naiiba sa mga taong iyong tinulungan.
Magplano ng magkakahiwalay na solusyon para sa mga ito, at sabihin sa mga sponsor kung aling mga tanong ang hindi nalutas sa pilot test.
Mga madalas itanong
Gaano dapat kalaki ang isang piloto na nagsasanay?
Sapat ang laki upang masubukan kung ang disenyo ay praktikal na ihatid at sukatin, at sapat ang liit upang baguhin nang mura. Walang iisang tamang numero. Iulat ang laki ng grupo at ituring ang anumang resulta bilang indikasyon.
Kailangan ko ba ng isang control group para suriin ang isang programa sa pagsasanay?
Pinapalakas ng isang grupong naghahambing ang ebidensya, ngunit hindi ito laging magagawa o patas. Ang isang baseline kasama ang isang unti-unting paglulunsad, kung saan magsisimula ang isang katulad na grupo sa ibang pagkakataon, ay isang praktikal na alternatibo.
Kailan ko dapat sukatin ang paglipat?
Matapos magkaroon ng oras at pagkakataon ang mga tao na ilapat ang mga natutunan sa trabaho, bigyan ito ng kahit ilang linggo. Sukatin muli ang parehong gawain, at magtanong tungkol sa mga hadlang na pumigil sa sinuman na gamitin ito.
Ang kasiyahan ba ay isang kapaki-pakinabang na sukatan?
Ito ay kapaki-pakinabang para sa pagpapabuti ng karanasan, ngunit hindi ito patunay ng paglipat. Ipares ito sa pagganap sa isang bagong gawain.
Saan magsisimula
Pumili ng isang gawain na mahalaga at isulat ang desisyong ibibigay ng pilot program. Kunin kung paano ito isinasagawa ng ilang tao ngayon, gamit ang isang maikling sample ng trabaho o scored case. Pagkatapos ay isulat ang iyong pamantayan sa desisyon bago magsimula ang pilot program, at i-book ang petsa ng follow-up sa diary.
Para makita kung paano maaaring gumana nang live ang isang practice case kasama ang sarili mong team, at magamit muli nang mag-isa pagkatapos, tuklasin ang AhaSlides.
