Bandomasis projektas baigiasi. Jame dalyvavo dvylika žmonių, beveik visi teigė, kad projektas buvo naudingas, o vadovas liko patenkintas. Tada operacijų vadovas užduoda teisingą klausimą: „Ar kas nors atliko savo darbą kitaip?“ Prieš bandomąjį projektą niekas nematavo, kaip žmonės dirbo, niekas jų nelygino su niekuo, o komanda tą patį mėnesį pakeitė savo procesą. Bandomasis projektas sukūrė gerą valią, o ne įrodymus.
Tai iliustracinis scenarijus, o ne dokumentuotas kliento atvejis. Jame parodytas įprastas mokymo programų vertinimo klaidų atvejis: bandomasis projektas vykdomas, bet niekada nebuvo skirtas atsakyti į klausimą.
Šis vadovas skirtas mokymo ir tobulinimosi skyrių vadovams, mokymo programų kūrėjams ir mokymų vadovams. Jame aprašyti penki etapai: bandomojo klausimo apibrėžimas, dalyvių ir pradinių matavimo priemonių pasirinkimas, mokymosi proceso užfiksavimas, naujų užduočių atlikimo ir perkėlimo įvertinimas bei rezultatų įtakos diegimui susitarimas. Jame pateikiamas šablonas, kurį galite pritaikyti, ir nurodyti išliekantys apribojimai.
Kas yra mokomasis pilotas?
Bandomasis mokymas – tai nedidelis, ribotos trukmės mokymosi plano išbandymas, prieš pradedant jį taikyti dideliu mastu. Jo užduotis – išsiaiškinti, ar planas yra įgyvendinamas ir ko verta siekti, o ne įrodyti, kad jis veikia visur.
Šis skirtumas yra svarbus. JAV Nacionalinis papildomos ir integruotos sveikatos centras bandomąjį tyrimą apibūdina kaip nedidelio masto metodų ir procedūrų, skirtų naudoti platesniu mastu, bandymą ir įspėja, kad bandomasis tyrimas neturi galios atsakyti į klausimus apie veiksmingumą, todėl bet koks jo rodomas poveikis yra nestabilus (NCCIH, bandomieji tyrimai: dažnas naudojimas ir netinkamas naudojimas). Šios gairės skirtos sveikatos tyrimams, tačiau logika išlieka. Dvylikos žmonių bandomasis projektas gali padėti jums pasakyti, ar galite pritraukti, įgyvendinti, įvertinti ir stebėti rezultatus. Jis negali užtikrintai pasakyti, koks didelis bus poveikis visai organizacijai.
Greiti faktai
| klausimas | Trumpas atsakymas |
|---|---|
| Kam skirtas pilotas? | Mokymosi ir įgyvendinimo prielaidų testavimas prieš diegimą. |
| Ko jums reikia prieš pradedant? | Testuojamas klausimas, užduotis, pradinis lygis ir sprendimo kriterijai. |
| Kas laikoma perdavimo įrodymu? | Naujos užduoties atlikimas po darbo patirties, o ne pasitenkinimas. |
| Ar jums reikia kontrolinės grupės? | Ne visada. Palyginamoji grupė arba laipsniškas diegimas padeda, kai tai įmanoma ir teisinga. |
| Kada nustatote sprendimo kriterijus? | Prieš pradedant nagrinėti bet kokius rezultatus. |
| Ko pilotas negali jums pasakyti? | Koks didelis bus poveikis mastu. |
1. Apibrėžkite bandomąjį klausimą
Pradėkite nuo klausimo, į kurį galima atsakyti „taip“ arba „ne“ arba nurodant skaičių, ir įvardykite, kokį sprendimą tai lems.
Silpnas klausimas: „Ar naujoji įvadinė programa veikia?“ Išbandomas klausimas: „Ar po pertvarkyto įvadinio proceso nauji darbuotojai gali susidoroti su standartiniu klientų eskalavimu be pagalbos ir ar bandomoji programa yra praktiška įgyvendinti per turimą instruktavimo laiką?“
Užsirašykite tris dalykus:
- Užduotis. Ką žmonės galės padaryti, ko anksčiau negalėjo arba nedarė gerai?
- Sprendimas. Ar peržiūrėsite dizainą, vykdysite dar vieną bandomąjį projektą ar diegsite plačiau?
- Mokymosi ir teikimo prielaidos. Kokias prielaidas darote apie privalomas sąlygas, laiką, instruktoriaus pajėgumus ir įrankius, kuriuos bandomasis projektas turėtų išbandyti?
Jei negalite įvardyti sprendimo, nesate pasiruošę atlikti bandomojo projekto. Rezultatas bus matomas niekam nelaukiant, kol bus imtasi veiksmų.
2. Pasirinkite dalyvius ir pradinius rodiklius
Bazinis lygis yra įrodymas, kaip žmonės atliko užduotį prieš mokymus. Be jo „patobulinimas“ neturi su kuo lygintis.
Sąmoningai rinkitės dalyvius. Pasirinkite žmones, kurie atlieka tikrąją užduotį ir yra panašūs į grupę, kuriai planuojate pradėti. Bandomasis projektas, kuriame dalyvaus tik entuziastingiausi jūsų savanoriai, tik labiau tiks dizainui.
Užfiksuokite bazinę liniją. Naudokite tą patį matavimo būdą, kurį naudosite vėliau, kad būtų galima palyginti abu variantus. Galimi variantai: trumpas darbo pavyzdys, struktūrizuotas stebėjimas, naujausių rezultatų apžvalga arba įvertintas atvejis. Užrašykite, kas buvo įtraukti, kiek jų atitiko reikalavimus ir kada atlikote matavimą.
Pagalvokite apie palyginimą. Stipriausias planas lygina žmones, kurie dalyvavo bandomajame projekte, su panašiais žmonėmis, kurie jame nedalyvavo. Tai ne visada įmanoma ar teisinga, ypač kai mokymai reikalingi saugumui ar atitikčiai užtikrinti. Laipsniškas diegimas yra praktiška alternatyva: viena grupė pradeda dabar, panaši grupė pradeda vėliau, o vėlesnė grupė veikia kaip palyginimas su pirmąja. Kad ir ką pasirinktumėte, plane nurodykite, kodėl tai teisinga dalyvaujančiųjų atžvilgiu.
3. Mokymosi kelionės pristatymas ir registravimas
Įrodymai naudingi tik tada, jei žinote, kas buvo pristatyta. Veskite aiškų įvykių žurnalą, nes pristatymo kaina ir pastangos yra dalis bandomojo projekto testavimo.
Įrašas:
- Paruošimas. Ką žmonės darė prieš sesijas ir kiek laiko tai truko?
- Praktika. Kokius atvejus ar pratimus jie nagrinėjo ir kokį atsiliepimą gavo?
- Koučingas. Kas treniravo, kiek laiko ir ar tai buvo tiesioginis, ar asinchroninis mokymas?
- Veiklos pakeitimai. Bet kokie kiti pokyčiai bandomojo projekto metu, pavyzdžiui, naujas įrankis, politikos pakeitimas, sezoninis skubėjimas ar vadovo pasikeitimas.
- Produkto konfigūracija ir kaina. Jūsų naudota konfigūracija ir pristatymui reikalingas laikas bei pinigai.
Pastarieji du aspektai yra svarbiausi priimant sprendimą dėl diegimo. Dizainas, kuris veikia tik su tokio lygio mokymu, kurio negalite sau leisti dideliu mastu, išmokė jus kažko vertingo, ir tai rodo žurnalas.
4. Įvertinkite naujų užduočių atlikimą ir perdavimą
Mokymo vertinimas dažnai aprašomas keturiais Kirkpatricko modelio lygiais: reakcija, mokymasis, elgesys ir rezultatai (Kirkpatrick partneriai). Pilotas turėtų pasiekti daugiau nei pirmąjį lygį. Reakcija, ar žmonėms tai buvo naudinga, greitai susikaupia, bet mažai pasako apie tai, ar jų veikla pasikeis.
Išbandykite mokymąsi atlikdami naują užduotį. Duokite dalyviams atvejį, kurio jie nėra praktikavę, ir įvertinkite jį pagal tuos pačius kriterijus, kuriuos naudojote pradiniame etape. Nauja užduotis parodo, ar žmonės gali pritaikyti tai, ko išmoko, o ne tai, ar jie prisimena pavyzdį.
Tolesni veiksmai po darbo poveikio. Perkėlimas reiškia išmoktų dalykų taikymą darbe ir jų tęsimą laikui bėgant. Dažnai cituojama Baldwino ir Fordo 1988 m. apžvalga apibrėžia perkėlimą kaip išmoktos medžiagos apibendrinimą darbui ir jos tęsimą laikui bėgant, ir nagrinėja, kaip mokymo planas, besimokančiųjų savybės ir darbo aplinka tai veikia (Baldwin ir Ford, 1988 m.). Taigi, suplanuokite tolesnį susitikimą po to, kai žmonės jau turės rimto darbo, pavyzdžiui, po kelių savaičių, ir dar kartą įvertinkite tą pačią užduotį.
Rekordinės kliūtys. Jei kas nors netaiko naujojo požiūrio darbe, paklauskite, kodėl. Atsakymas gali būti trūkstamas įrankis, vadovas, kuris tikisi senojo metodo, arba per mažai laiko. Tai yra išvados apie darbo aplinką, o ne besimokančiojo nesėkmės.
Nedarykite išvados apie perkėlimą iš pasitenkinimo. Gerą grįžtamojo ryšio balą verta užfiksuoti. Tai neparodo, kad elgesys pasikeitė.
5. Nuspręskite, kaip rezultatai paveiks diegimą
Prieš peržiūrėdami rezultatus, užsirašykite sprendimo kriterijus. Priešingu atveju lengva rasti priežastį tęsti tai, ką matote.
Paprasta struktūra:
| Jei pilotas rodo | Tada |
|---|---|
| Pagerėjo užduočių atlikimas, perdavimas atliktas, pristatymas buvo įmanomas | Planuokite platesnį diegimą ir nuolat vertinkite. |
| Užduočių atlikimas pagerėjo, tačiau perkėlimą stabdė darbo aplinka | Sutvarkykite barjerą, tada paleiskite antrą pilotą. |
| Nedideli pokyčiai naujoje užduotyje | Prieš tolesnį paleidimą peržiūrėkite dizainą. |
| Pristatymo kaina arba pristatymo laikas nebuvo tinkamas | Pertvarkykite pateikimo būdą, tada vėl išbandykite. |
Sąžiningai įvertinkite, ką gali paremti maža grupė. Skaičius laikykite orientaciniais, nurodykite grupės dydį ir vardiklį ir venkite efekto dydžio ar garantijų. Prieš priskirdami mokymams kreditą, nurodykite, kokie kiti pokyčiai įvyko tuo pačiu metu.
Bandomojo matavimo šablonas
Iliustracinis pavyzdys. Šį darbą atliekantis specialistas turėtų jį peržiūrėti prieš naudodamas.
| Skyrius | Ką užrašyti |
|---|---|
| Bandomasis klausimas | Testuojamas klausimas ir sprendimas, kurį jis lemia. |
| užduotis | Nauja užduotis, kurią žmonės turėtų atlikti, ir kaip ji bus vertinama. |
| Dalyviai | Kas įtraukta, kiek jų atitiko reikalavimus ir kokia yra palyginamoji grupė. |
| Pradinis | Matas, data ir balai prieš treniruotę. |
| Mokymosi kelionė | Pasiruošimas, praktika, koučingas, laikas ir kaina. |
| Lygiagretūs pokyčiai | Visa kita, kas pasikeitė bandomojo laikotarpio metu. |
| Naujos užduoties rezultatas | Taškai už užduotį, kuri nebuvo praktikuojama bandomojo projekto metu. |
| Sekti | Laikas, kas buvo pasiektas, ir balai po darbo poveikio. |
| Kliūtys | Kas sustabdė žmones pritaikant išmoktas žinias. |
| Sprendimo kriterijai | Ribos, kurias nustatote prieš peržiūrėdami rezultatus. |
| Rezultatas | Peržiūrėti, vėl išbandyti ar pradėti diegti, ir kodėl. |
Kur padeda interaktyvus pristatymas
Interaktyvūs formatai tinka bandomojo projekto praktikos etapui, nes kiekvienas asmuo įsipareigoja atsakyti prieš pamatydamas grupės atsakymus, todėl galite matyti ne tik dalyvavimą, bet ir samprotavimus. Fasilitatorius gali tiesiogiai vesti bylą, o tą pačią bylą galima naudoti savarankiškam pasiruošimui ar tolesnei veiklai. „AhaSlides“ palaiko interaktyvų mokymąsi ir perėjimą tarp tiesioginio ir savarankiško pristatymo. Patikrinkite visas konkrečias kūrimo, atsiliepimų ar ataskaitų teikimo funkcijas, kuriomis planuojate remtis savo darbo eigoje, ir DI, modeliavimo ir integravimo funkcijas traktuokite kaip išorines arba nepatvirtintas, kol nepamatysite jų veikiančių. Norėdami pasirinkti formatus, žr. Kada naudoti adaptyvų, interaktyvų ir tiesioginį mokymąsiNorėdami susieti veiklas su mąstymu, kurį norite išmatuoti, žr. mūsų vadovą mokymosi veiklų derinimas su Bloomo taksonomija.
Apribojimai, kurie gali likti
Net ir gerai suplanuotas bandomasis projektas palieka kai kuriuos neišspręstus dalykus:
- Maži skaičiai. Bandomasis projektas parodo įgyvendinamumą ir kryptį, o ne tai, koks didelis bus poveikis mastu.
- Darbo aplinka. Žmonės gali gerai atlikti naują užduotį ir vis tiek jos nenaudoti darbe, jei jų vadovas, įrankiai ar paskatos rodo priešingai.
- Laikas. Tolesnis tyrimas po kelių savaičių neparodo, kas lieka po šešių mėnesių.
- Lygiagretus pokytis. Kiti pokyčiai tuo pačiu laikotarpiu gali paaiškinti dalį pagerėjimo.
- Pasirinkimas. Savanoriaujantys žmonės gali skirtis nuo tų, kuriems jūs pranešate.
Planuokite atskirus šių problemų sprendimus ir pasakykite rėmėjams, kurių klausimų pilotas neišsprendė.
Dažnai užduodami klausimai
Kokio dydžio turėtų būti mokomasis pilotas?
Pakankamai didelis, kad būtų galima patikrinti, ar projektą praktiška įgyvendinti ir išmatuoti, ir pakankamai mažas, kad būtų galima pigiai pakeisti. Nėra vieno teisingo skaičiaus. Praneškite apie grupės dydį ir bet kokį rezultatą traktuokite kaip orientacinį.
Ar man reikia kontrolinės grupės mokymo programai įvertinti?
Palyginamoji grupė sustiprina įrodymus, tačiau tai ne visada įmanoma ar teisinga. Praktiška alternatyva yra bazinis scenarijus ir laipsniškas diegimas, kai panaši grupė pradeda veikti vėliau.
Kada turėčiau išmatuoti perdavimą?
Kai žmonės turės laiko ir galimybių pritaikyti išmoktas žinias darbe, skirkite tam bent kelias savaites. Dar kartą įvertinkite tą pačią užduotį ir paklauskite apie kliūtis, kurios sutrukdė jas pritaikyti.
Ar pasitenkinimas yra naudingas matas?
Tai naudinga patirties gerinimui, bet tai nėra perkėlimo įrodymas. Susiekite tai su naujos užduoties atlikimu.
Kur pradėti
Pasirinkite vieną svarbią užduotį ir užrašykite sprendimą, kuriuo remdamiesi atliksite bandomąjį projektą. Pateikite trumpą darbo pavyzdį arba įvertintą atvejį, kaip keli žmonės ją atlieka šiandien. Tada prieš prasidedant bandomajam projektui užrašykite savo sprendimo kriterijus ir dienoraštyje nurodykite tolesnės užduoties datą.
Norėdami sužinoti, kaip praktikos atvejis galėtų būti vykdomas tiesiogiai su jūsų komanda ir vėliau pakartotinai panaudotas savarankiškai, peržiūrėkite „AhaSlides“.
