Slimnīcas komanda pārveido savu prasību apstrādes darbplūsmu. Tā apmāca administratīvo personālu jaunajā procesā, un sešus mēnešus vēlāk izmaksas par vienu prasību ir zemākas. Finanšu nodaļa ir apmierināta un lūdz pateikt skaitli: cik daudz apmācība ietaupīja?
Godīga atbilde ir grūtāka nekā jautājums. Tajos pašos sešos mēnešos mainījās personāls, palielinājās atlīdzību apjomi un maksātājs mainīja savus noteikumus. Daļa no ietaupījumiem radās, pateicoties pārveidošanai, daļa – apmācībām, bet daļa – ne no viena no iepriekšminētajiem. Kvalitātes uzlabošanas apmācību ROI ir darbs, atdalot šīs daļas un ziņojot par to, kas paliek pāri, ar noteiktu pārliecības līmeni.
Šis ir ilustratīvs scenārijs, nevis dokumentēts gadījums. Šī rokasgrāmata ir paredzēta slimnīcu mācību un attīstības direktoriem un informātikas vai atbilstības vadītājiem, kas ar viņiem strādā. Tajā ir aprakstīts, kā definēt salīdzinājumu, izmērīt faktisko uzdevumu, sasaistīt šos pierādījumus ar operatīvajiem datiem, izslēgt citus skaidrojumus un ziņot par rezultātiem, nepārspīlējot.
Kāda ir kvalitātes uzlabošanas apmācību ROI?
Kvalitātes uzlabošanas apmācību ieguldījumu aplēse (ROI) salīdzina ar apmācībām saistīta uzlabošanas projekta ieguvumus ar tā izmaksām. Tajā tiek jautāts, ko organizācija ieguva, ko tā nebūtu ieguvusi bez apmācībām, un vai šis ieguvums bija apmācību un projekta izmaksu vērts. Visizplatītākā forma ir vienkārša: tīrie ieguvumi (ieguvumi mīnus izmaksas) dalīti ar izmaksām, kas parādītas procentos.
Aritmētika ir vieglākā daļa. Grūtākais ir izlemt, kuri ieguvumi pieder pie apmācības. ROI institūts, kas reklamē piecu līmeņu novērtēšanas sistēmu, uzskaita "projekta efektu izolēšanu" kā atsevišķu soli datu analīzē (ROI institūts). Tā pieci līmeņi ir reakcija, mācīšanās, pielietošana, ietekme un ROI. Apmierinātība un pabeigšana atrodas pirmajā līmenī. Tie ir noderīgi piegādes rādītāji, taču tie neliecina par ietaupījumiem.
Īsi fakti
| jautājums | Īsā atbilde |
|---|---|
| Kāds ir uzdevums? | Novērtējiet ar apmācību saistīta uzlabošanas projekta izmaksas un ieguvumus. |
| Kādu rezultātu tu iegūsti? | Neto izmaksu aprēķini un attiecinājuma ticamība. |
| Vai pietiek ar apmierinātības aptauju? | Nē. Tas parāda, kā kurss tika saņemts, nevis ko tas saglabāja. |
| Kas apstiprina metodi? | Finanšu partneris un informātikas vai atbilstības vadītājs. |
| Ko nevar labot ar treniņiem? | Personāla izmaiņas, apjoma svārstības un maksātāju noteikumi notiek vienlaikus. |
| Kā tu zini, ka tas nostrādāja? | Sākotnējo un turpmāko uzdevumu, kā arī operatīvo datu salīdzinājums, pārbaudot citus cēloņus. |
1. Definējiet rezultātu un salīdzinājumu
Pirms jebkādu datu vākšanas pierakstiet trīs lietas: intervenci, skartās lomas un lēmumu, kuru analīzei jāpamato. Jautājums "Vai apmācība ietaupīja naudu?" ir pārāk neskaidrs. Jautājums "Vai mums vajadzētu paplašināt prasību darbplūsmas programmu uz otro objektu?" ir lēmums, un tas norāda, kādi pierādījumi būtu pietiekami.
Pēc tam atdaliet divu veidu izmaksas. piegādes izmaksas vāka dizaina laiks, vadītāja vai kouča laiks, apmācāmo stundas, materiāli un jebkāda programmatūra. Ekspluatācijas izmaksas Apskatiet izmaiņas pašā procesā: jaunus rīkus, pārskatītas procedūras, īslaicīgu dubultu darbību, kamēr darbinieki apgūst jauno metodi. Apmācības ROI, kas ņem vērā tikai piegādes izmaksas, glaimo programmai. ROI, kas ņem vērā visu, var būt pareizais uzlabošanas projekta rādītājs, taču tas ir negodīgi pret apmācību. Izlemiet, uz kuru jautājumu jūs atbildat, un norādiet to ziņojumā.
Darbinieku laiks ir pelnījis rūpību. Apmācībās pavadītās stundas ir reālas izmaksas pat tad, ja neviens nesūta rēķinu, tāpēc reģistrējiet tās, izmantojot likmi, par kuru vienojas jūsu finanšu partneris.
2. Izmēriet faktisko uzdevumu
Šeit uzdevums nav "apmeklēt programmu". Tā ir kaut kas tāds, ko students veic darbā, piemēram, labo apgalvojumus pret jauno kontrolsarakstu, kodē atteikumus pēc iemesla vai reģistrē izņēmumu. Izmēriet to, izmantojot novērojamus pierādījumus.
- Iestatiet bāzes līniju pirms apmācības: reālu vai reālistisku uzdevumu paraugs, kas novērtēts atbilstoši saskaņotiem kritērijiem.
- Veiciet salīdzināmu novērtējumu pēc apmācības, izmantojot jaunus līdzīgas grūtības pakāpes uzdevumus, nevis tos, pie kuriem studenti jau praktizējās.
- Saglabājiet pabeigšanu un apmierinātību kā piegādes rādītāji, par kuriem ziņots atsevišķi.
Šeit ir svarīgi iegūt uzdevuma pierādījumus. Ja darbinieki tagad var precīzāk veikt uzdevumu neredzētos gadījumos, saikne starp apmācību un jebkādām darbības izmaiņām kļūst ticama. Ja tā nav, ietaupījums, visticamāk, nebūs apmācību nopelns. Plašāku informāciju par rakstīšanas praksi un atsauksmēm, kas saistītas ar uzdevumu, skatiet mūsu ceļvedī. interaktīvas prakses izstrāde ar noderīgu atgriezenisko saiti.
3. Saistiet uzdevuma pierādījumus ar darbības datiem
Tagad novietojiet uzdevuma pierādījumus blakus operatīvajiem datiem. Katram rādītājam pierakstiet četras lietas: populāciju (kas ir iekļauts), saucēju (uz vienu prasību, uz vienu darbinieku vai uz mēnesi), periodu un avotu.
Administratīvo uzlabojumu projektos bieži izmantotie rādītāji ietver pārstrādāšanas ātrumu, novēršamu iemeslu dēļ noraidīto pieprasījumu īpatsvaru, uzdevuma izpildes laiku un izmaksas par darījumu. Katras izmaiņas pārvērtiet naudā tikai ar vienības izmaksām, ko apstiprinājis jūsu finanšu partneris. Pēc tam aprēķiniet svarīgo skaitli:
- Paredzamais ieguvums: pasākuma izmaiņas, kas reizinātas ar saskaņotajām vienības izmaksām.
- Apmācībai piešķirtā daļa: pamatots procentuālais daudzums, nevis minējums, ar rakstisku pamatojumu.
- Neto novērtējums: attiecinātais ieguvums, no kura atskaitītas apmācības un projekta izmaksas, kuras nolēmāt iekļaut.
Uztveriet ticamu saiti kā ticamu saiti. Pārstrādes kritums pēc apmācības atbilst apmācības sekmīgai darbībai. Tas nepierāda, ka tā patiešām darbojās.
4. Apsveriet alternatīvus skaidrojumus
Apsveriet, kas vēl mainījās salīdzināšanas periodā. Īss kontrolsaraksts palīdzēs:
- Darba slodze. Vai apjomi pieauga vai kritās? Klusāks ceturksnis bieži vien nozīmē mazāk kļūdu.
- Personāla komplektēšana. Vai aizgāja pieredzējuši cilvēki, vai pievienojās jauni, kuri nekad nebija apmācīti?
- Klienta vai maksātāja kombinācija. Vai mainījās prasību veidi?
- Procesa vai sistēmas izmaiņas. Vai vienlaikus mainījās vēl kaut kas attiecībā uz darbplūsmu?
Kur vien iespējams, izmantojiet salīdzinājumu. saskaņots salīdzinājums aplūko līdzīgu komandu, kurai vēl nebija apmācības. A pakāpeniska izlaišana sniedz jums šo salīdzinājumu gandrīz bez maksas: vēlāk apmācītās komandas kalpo kā kontroles grupa vispirms apmācītajām komandām. Neviens no tiem nav vienmēr iespējams slimnīcā, kur katrai komandai var būt nepieciešamas izmaiņas uzreiz, un tādā gadījumā jūs godīgi ziņojat par zemāku ticamības līmeni.
Šeit noderīgs ir 2022. gadā publicētais BMC Health Services Research apskats par atdevi no liela mēroga veselības aprūpes kvalitātes uzlabošanas. Tā autori definē atdevi plaši, kā jebkuru monetāru vai nemonetāru vērtību, kas iegūta no kvalitātes uzlabošanas, un norāda, ka rezultāti ir savstarpēji saistīti un grūti novērojami. Viņi iesaka novērtēt ieguldījumu rezultātos, nevis apgalvot tiešu attiecināšanu, un tradicionālo ieguldījumu atdevi sauc par "distālu un nepilnīgu QI vērtības marķieri" (Thusini et al., BMC veselības pakalpojumu pētījumi, 2022). Tas attiecas arī uz administratīviem projektiem. Ziņojiet par ieguldījuma pierādījumiem un savu pārliecību par tiem, nevis par vienu kļūdaini precīzu skaitli.
5. Ziņojiet par rezultātiem un izvēlieties nākamo darbību
Ziņojums, par kuru finanšu komiteja var rīkoties, ietilpst vienā lapā. Šajā parauga izkārtojumā rezultātu lauki ir atstāti tukši. Aizpildiet tos ar saviem datiem, nekad ar aizgūtiem efektu lielumiem.
| Lauks | Ko ierakstīt | Rezultāts |
|---|---|---|
| Iejaukšanās un lomas | Programma, projekts un dalībnieki | |
| Iedzīvotāju skaits un periods | Kas ir iekļauts, no kura brīža līdz kuram laikam | |
| Sākotnējie un turpmāko uzdevumu rādītāji | Vieni un tie paši kritēriji, dažādi gadījumi | |
| Darbības mērs un saucējs | Piemēram, atkārtotas apstrādes līmenis uz 100 prasībām | |
| Paredzamais ieguvums | Izmaiņas reizinātas ar apstiprinātajām vienības izmaksām | |
| Apmācībai piedēvētā daļa un iemesli | Izmantotā argumentācija, salīdzinājums | |
| Piegādes un ekspluatācijas izmaksas | Uzskaitīts atsevišķi | |
| Neto novērtējums un ticamība | Augsts, vidējs vai zems, ar iemeslu | |
| Citas izmaiņas šajā periodā | Darba slodze, personāla komplektēšana, miksēšana, process | |
| Ieteicamā darbība | Mērogot, pārskatīt vai apturēt |
Iepriekš izlemiet, kas attaisnotu katru darbību. Jūs varētu paplašināt programmu, ja uzdevumu rezultāti uzlabojas neredzētos gadījumos, operatīvie pasākumi virzās paredzētajā virzienā, tiek pārbaudīti citi skaidrojumi un neto novērtējums saglabājas pozitīvs, pamatojoties uz piesardzīgiem pieņēmumiem. Jūs varētu to pārskatīt, ja uzdevumu rezultāti uzlabojas, bet operatīvie pasākumi ne, kas liecina par ierobežojumiem ārpus apmācības. Jūs varētu to pārtraukt, ja neviens no tiem nemainījās. Vienojieties ar šiem noteikumiem ar savu sponsoru, pirms redzat skaitļus, lai rezultāts nenoteiktu kritērijus.
Strādājiet ar reālistisku piemēru
Ilustratīvi. Finanšu partnerim un informātikas vai atbilstības vadītājam pirms lietošanas ir jāapstiprina lieta un atbildes kritēriji.
Lieta. Komanda pārveido atlīdzību apstrādes darbplūsmu, mainoties arī personāla sastāvam un apjomiem. Pārstrādes apjoms sešos mēnešos pēc apmācībām samazinājās. Tajā pašā periodā darbu aizgāja divi pieredzējuši kodētāji, un apjoms otrajā ceturksnī nedaudz samazinājās.
Uzdevums. Mācību dalībnieks novērtē ietaupījumus, ko apmācība var pamatoti pieprasīt, paskaidro lēmumu, citē pierādījumus un nosauc informāciju, kuras joprojām trūkst.
Pirmais mēģinājums. "Pārstrādāšanas izmaksas samazinājās, tāpēc apmācība ietaupīja visu starpību. Es reizināju kritumu ar mūsu izmaksām par katru pārstrādāšanu un ziņoju kā ieguldījumu atdevi." Tas visu piedēvē apmācībai un ignorē citas izmaiņas.
Atsauksmes un mēģinājums vēlreiz. Treneris jautā, kas vēl mainījās, vai apmācītie un neapmācītie darbinieki atšķiras un no kurienes radās vienības izmaksas. Studentam tiek lūgts sadalīt ieguvumu.
Spēcīgāks mēģinājums. "Pārstrādāšanas apjoms samazinājās, bet divi pieredzējuši kodētāji aizgāja, un apjoms samazinājās, tāpēc es nevaru to visu attiecināt uz apmācību. Uzdevumu rezultāti neredzētos gadījumos pieauga, kas apstiprina apmācības ieguldījumu. Es ziņotu par novēroto ietaupījumu, samazinātu daļu, ko varu pamatot, un zemu līdz vidēju ticamības vērtējumu. Lai palielinātu ticamību, man ir nepieciešams pārstrādāts darbs, ko veic apmācīti un neapmācīti darbinieki, un vienības izmaksas no finansējuma." Tas atdala novērotos ietaupījumus no radītajiem ietaupījumiem un norāda, kādu pierādījumu trūkst.
Novērtējiet spējas, izmantojot vienkāršu kritēriju sarakstu
Novērtējiet katru kritēriju no 0 līdz 2:
| Kritērijs | Novērojami pierādījumi |
|---|---|
| Uzdevuma izpilde | Mēra ar apmācību saistīta projekta izmaksas un ieguvumus un reģistrē katru skaitli pamatojošo pierādījumu. |
| Pamatojums | Izskaidro ierobežojumus, alternatīvas un nenoteiktību, kā arī pārbauda neto izmaksu aprēķinus un attiecinājuma ticamību. |
| Robežas | Izmanto apstiprinātas procedūras un meklē palīdzību, ja informācijas vai pilnvaru nepietiek. |
Enkuri: 0 nav vai nav pamatoti, 1 ir daļēji ar būtiskiem izlaidumiem, un 2 ir pilnīgi un pamatoti atbilstoši saskaņotajiem kritērijiem. Atsevišķi definējiet kritiskās kļūdas, piemēram, pilnīgu izmaiņu attiecināšanu uz apmācību, nepārbaudot citus iemeslus, lai kopējais vērtējums nevarētu tos slēpt. Šī rubrika ir priekšlikums, nevis apstiprināts gatavības standarts: pielāgojiet to kopā ar praktiķi un izmēģiniet to. Lai katru aktivitāti saskaņotu ar tās prasībām atbilstošu domāšanu, skatiet mūsu rokasgrāmatu par... mācību aktivitāšu saskaņošana ar Blūma taksonomiju.
Kur palīdz interaktīva piegāde
Interaktīvie formāti palīdz situācijās, kad cilvēkiem jāapņemas, pirms viņi dzird atbildi. Tiešraides sesijā vadītājs var parādīt prasības lietu, lūgt katrai personai ierakstīt ietaupījuma daļu, ko viņi attiecinātu uz apmācību, un pēc tam parādīt starpību, pirms tiek apspriests, kāpēc aplēses atšķiras. To pašu lietu var sagatavot patstāvīgi. AhaSlides atbalsta interaktīvu mācīšanos un pāreju starp tiešraides un patstāvīgu apmācību. Pārbaudiet jebkuru konkrētu autorēšanas, atsauksmju vai ziņošanas funkciju, uz kuru plānojat paļauties, salīdzinot to ar savu darbplūsmu, un izturieties pret mākslīgo intelektu, simulatoriem un sistēmu integrācijām kā ārējām vai neapstiprinātām, līdz esat redzējis, ka tās darbojas. Lai iegūtu norādījumus par formātu izvēli, skatiet mūsu rakstu par Kad izmantot adaptīvo, interaktīvo un tiešo mācīšanos.
Ierobežojumi, kas var palikt
- Attiecinājums. Bez salīdzināšanas grupas jūs varat novērtēt ieguldījumu, nevis pierādīt cēloni.
- Laika nobīde. Daži ietaupījumi parādās tikai pēc ceturtdaļām, un īsā laika posmā tie var neparādīties.
- Datu kvalitāte. Darbības dati var būt nepilnīgi, vai arī to definīcijas var mainīties perioda vidū.
- Citas izmaiņas. Personāla nodrošinājums, apjoms un maksātāju noteikumi var mazināt nelielu apmācības efektu.
- Pārskaitījums. Veiktspēja mācību situācijā nav tāda pati kā veiktspēja ikdienas stresa apstākļos.
Jau laikus nosauciet tos sponsoriem. Apmācība uzlabo cilvēku iespējas. Tā nemaina darba apstākļus.
Biežāk uzdotie jautājumi
Kāda ir kvalitātes uzlabošanas apmācību ROI?
Tajā tiek salīdzināti ar apmācību saistīta uzlabošanas projekta ieguvumi ar tā izmaksām, parasti kā tīrie ieguvumi, dalīti ar izmaksām. Galvenais solis ir noteikt, cik lielu ieguvumu apmācība var pamatoti pieprasīt.
Vai varat pierādīt, ka ietaupījumus radīja apmācība?
Reti. Salīdzinājums vai pakāpeniska ieviešana sniedz spēcīgākus pierādījumus, taču vairumā slimnīcu jūs ziņojat par pamatotu ieguldījumu un ticamības līmeni, nevis pierādījumu.
Vai piegādes izmaksas un ekspluatācijas izmaksas būtu jāuzskaita kopā?
Ziņojiet par tām atsevišķi. Piegādes izmaksas apraksta pašas apmācības. Darbības izmaksas apraksta plašāku uzlabošanas projektu. Norādiet, kuru kopsummu izmanto jūsu ieguldījumu atdeve (ROI).
Vai apmierinātības aptauja liecina par ietaupījumiem?
Nē. Apmierinātība un pabeigšana ir piegādes rādītāji. Ietaupījumiem ir nepieciešami uzdevumu pierādījumi un darbības dati.
Kur sākt
Izvēlieties vienu uzlabošanas projektu, kuram jau ir sākotnējā vērtība. Uzrakstiet lēmumu, kas analīzei ir jāpamato, uzskaitiet izmaksas, kuras iekļausiet, izvēlieties vienu darbības pasākumu ar tā saucēju un lūdziet finanšu partnerim apstiprināt vienības izmaksas. Sagatavojiet vienas lapas ziņojumu ar tukšiem rezultātu laukiem un vienojieties par apjomu, pārskatīšanas vai apturēšanas noteikumiem, pirms tiek saņemti dati.
Lai redzētu, kā šāds gadījums varētu noritēt tiešraidē ar jūsu komandu un pēc tam tikt atkārtoti izmantots patstāvīgi, izpētiet AhaSlides.
