Sairaalatiimi suunnittelee korvausprosessinsa uudelleen. Se kouluttaa hallintohenkilökunnan uuteen prosessiin, ja kuusi kuukautta myöhemmin korvauskohtaiset kustannukset ovat alhaisemmat. Talousosasto on tyytyväinen ja kysyy lukua: kuinka paljon koulutus säästi?
Rehellinen vastaus on vaikeampi kuin kysymys. Saman kuuden kuukauden aikana henkilöstö muuttui, korvausmäärät kasvoivat ja maksaja muutti sääntöjään. Osa säästöistä tuli uudelleensuunnittelusta, osa koulutuksesta ja osa ei mistään edellä mainituista. Laadunparannuskoulutuksen ROI on työtä, jossa nämä osat erotetaan toisistaan ja jäljelle jäänyt raportoidaan tietyllä luottamustasolla.
Tämä on havainnollistava skenaario, ei dokumentoitu tapaus. Tämä opas on tarkoitettu sairaaloiden koulutus- ja kehitysjohtajille sekä heidän kanssaan työskenteleville tietotekniikan tai vaatimustenmukaisuuden johtajille. Se kattaa vertailun määrittelemisen, varsinaisen tehtävän mittaamisen, näytön yhdistämisen operatiivisiin tietoihin, muiden selitysten poissulkemisen ja tulosten raportoinnin liioittelematta.
Mikä on laadunparannuskoulutuksen ROI?
Laadunparannuskoulutuksen ROI vertaa koulutukseen kytketyn parannushankkeen hyötyjä sen kustannuksiin. Se kysyy, mitä organisaatio sai sellaista, mitä se ei olisi saanut ilman koulutusta, ja oliko tämä hyöty koulutuksen ja hankkeen kustannusten arvoinen. Yleisin muoto on yksinkertainen: nettohyödyt (hyödyt miinus kustannukset) jaettuna kustannuksilla, prosenttiosuutena.
Laskutoimitus on helppo osa. Vaikea osa on päättää, mitkä hyödyt kuuluvat koulutukseen. ROI Institute, joka edistää viisitasoista arviointikehystä, listaa "projektin vaikutusten eristämisen" omaksi vaiheekseen datan analysoinnissa (ROI-instituutti). Sen viisi tasoa ovat reaktio, oppiminen, soveltaminen, vaikutus ja ROI. Tyytyväisyys ja valmistuminen ovat ensimmäisellä tasolla. Ne ovat hyödyllisiä toimitusindikaattoreita, mutta ne eivät ole osoitus säästöistä.
Nopeita faktoja
| Kysymys | Lyhyt vastaus |
|---|---|
| Mikä on tehtävä? | Mittaa koulutukseen kytketyn parannushankkeen kustannuksia ja hyötyjä. |
| Mitä pisteitä saat? | Nettokustannusarviot ja attribuution luotettavuus. |
| Riittääkö tyytyväisyyskysely? | Ei. Se näyttää, miten kurssi vastaanotettiin, ei mitä sillä tallennettiin. |
| Kuka validoi menetelmän? | Talouskumppani ja tietotekniikan tai vaatimustenmukaisuuden johtaja. |
| Mitä harjoitus ei korjaa? | Henkilöstömuutokset, volyymimuutokset ja maksajasäännöt tapahtuvat samaan aikaan. |
| Mistä tiedät, että se toimi? | Lähtötilanteen ja seurantatehtävien sekä operatiivisten tietojen vertailu, jossa tarkistetaan muita syitä. |
1. Määrittele lopputulos ja vertailu
Ennen kuin keräät mitään tietoa, kirjoita muistiin kolme asiaa: interventio, siihen liittyvät roolit ja päätös, jota analyysin on tuettava. "Säästikö koulutus rahaa?" on liian epämääräinen kysymys. "Pitäisikö meidän laajentaa korvausprosessia toiseen toimipisteeseen?" on päätös, ja se kertoo, mitkä todisteet riittäisivät.
Erota sitten kaksi kustannustyyppiä. Toimituskulut suunnitteluaika, fasilitaattorin tai valmentajan aika, oppijoiden tunnit, materiaalit ja mahdolliset ohjelmistot. Käyttökustannukset Käsittele itse prosessin muutokset: uudet työkalut, tarkistetut menettelytavat, väliaikainen päällekkäinen suorittaminen, kun henkilöstö oppii uuden menetelmän. Koulutuksen ROI, joka ottaa huomioon vain toimituskustannukset, imartelee ohjelmaa. ROI, joka ottaa huomioon kaiken, voi olla oikea mittari parannusprojektille, mutta epäreilu koulutuksen kannalta. Päätä, mihin kysymykseen vastaat, ja mainitse se raportissa.
Henkilöstön aika ansaitsee huomiota. Koulutukseen käytetyt tunnit ovat todellisia kustannuksia, vaikka kukaan ei lähettäisi laskua, joten kirjaa ne talouskumppanisi kanssa sovitulla hinnalla.
2. Mittaa varsinaista tehtävää
Tehtävänä ei ole "osallistua ohjelmaan". Se on jotain, mitä oppija tekee työssään, kuten korjaa väitteitä uutta tarkistuslistaa vasten, koodaa kieltoja syyn mukaan tai kirjaa poikkeuksen. Mittaa tätä havaittavissa olevien todisteiden avulla.
- Aseta perusviiva ennen koulutusta: otos todellisista tai realistisista tehtävistä, jotka pisteytetään sovittujen kriteerien perusteella.
- Suorita vertailuarviointi koulutuksen jälkeen käyttämällä uusia, saman vaikeusasteen tehtäviä sen sijaan, mitä oppijat ovat harjoitelleet.
- Pidä yllä valmistumista ja tyytyväisyyttä toimitusindikaattoreina, jotka raportoidaan erikseen.
Tässä kohtaa tehtävään liittyvä todistusaineisto ansaitsee paikkansa. Jos henkilöstö pystyy nyt suorittamaan tehtävän tarkemmin näkymättömissä tapauksissa, koulutuksen ja operatiivisten muutosten välinen yhteys tulee uskottavaksi. Jos näin ei ole, säästö ei todennäköisesti johdu koulutuksesta. Lisätietoja kirjoituskäytännöistä ja tehtävään liittyvästä palautteesta on oppaassamme. interaktiivisen käytännön suunnittelu hyödyllisen palautteen avulla.
3. Yhdistä tehtävän todisteet operatiivisiin tietoihin
Lisää nyt tehtävän todisteet operatiivisten tietojen viereen. Kirjaa jokaisesta mittarista neljä asiaa: perusjoukko (kitä se sisältää), nimittäjä (korvausvaatimusta, henkilöstön jäsentä tai kuukautta kohden), ajanjakso ja lähde.
Hallinnollisten parannushankkeiden yleisiä mittareita ovat muun muassa uudelleenkäsittelyaste, vältettävissä olevista syistä hylättyjen hakemusten osuus, tehtävän suorittamiseen kuluva aika ja tapahtumakohtaiset kustannukset. Muunna jokainen muutos rahaksi vain rahoituskumppanisi hyväksymällä yksikkökustannuksella. Laske sitten tärkeä luku:
- Arvioitu hyöty: toimenpiteen muutos kerrottuna sovitulla yksikkökustannuksella.
- Koulutukseen liittyvä osuus: perusteltu prosenttiosuus, ei arvaus, ja perustelut kirjallisesti.
- Nettoarvio: kohdistettu hyöty vähennettynä koulutus- ja projektikustannuksilla, jotka päätit sisällyttää.
Käsittele uskottavaa linkkiä uskottavana linkkinä. Muodonmuutoksen väheneminen harjoittelun jälkeen on yhdenmukaista harjoittelun toimivuuden kanssa. Se ei todista, että se toimi.
4. Ota huomioon vaihtoehtoiset selitykset
Käy läpi, mitä muuta muuttui vertailujakson aikana. Lyhyt tarkistuslista auttaa:
- Työmäärä. Nousivatko vai laskivatko volyymit? Hiljaisempi vuosineljännes tarkoittaa usein vähemmän virheitä.
- Henkilöstöpalvelut. Lähtivätkö kokeneet ihmiset vai liittyivätkö mukaan uusia, joita ei ollut koskaan koulutettu?
- Asiakas- tai maksajayhdistelmä. Muuttuivatko korvaushakemusten tyypit?
- Prosessi- tai järjestelmämuutokset. Muuttuiko samaan aikaan jokin muu työnkulussa?
Käytä vertailua aina kun mahdollista. vastaava vertailu tarkastelee samanlaista tiimiä, jolla ei vielä ollut koulutusta. vaiheittainen käyttöönotto antaa sinulle tuon vertailun lähes ilmaiseksi: myöhemmin koulutetut joukkueet toimivat kontrollina ensin koulutetuille joukkueille. Kumpikaan ei ole aina mahdollista sairaalassa, jossa jokainen joukkue saattaa tarvita muutoksen kerralla, ja siinä tapauksessa ilmoitat rehellisesti sanottuna alhaisemman luottamustason.
BMC Health Services Research -lehdessä vuonna 2022 julkaistu katsaus laajamittaisen terveydenhuollon laadunparannuksen tuottoon on tässä hyödyllinen. Sen kirjoittajat määrittelevät tuoton laajasti kaikeksi laadunparannuksesta saatavaksi rahalliseksi tai ei-rahalliseksi arvoksi ja huomauttavat, että tulokset ovat toisiinsa yhteydessä ja niitä on vaikea havaita. He ehdottavat tulosten vaikutusten arviointia suoran attribuution väittämisen sijaan ja kutsuvat perinteistä ROI:ta "epätäydelliseksi ja epätäydelliseksi QI-arvon mittariksi" (Thusini ym., BMC Health Services Research, 2022). Tämä sopii myös hallinnollisiin projekteihin. Raportoi todisteet panoksestasi ja luottamuksestasi siihen, äläkä esitä yhtäkään väärän tarkkaa lukua.
5. Raportoi tulokset ja valitse seuraava toimenpide
Rahoitusvaliokunnan käsittelyyn tarkoitettu raportti mahtuu yhdelle sivulle. Tässä esimerkkiasettelussa tuloskentät on jätetty tarkoituksella tyhjiksi. Täytä ne omilla tiedoillasi, älä koskaan lainatuilla efektikooilla.
| Kenttä | Mitä äänittää | Tulos |
|---|---|---|
| Interventio ja roolit | Ohjelma, projekti ja osallistujat | |
| Väestö ja ajanjakso | Ketkä ovat mukana, milloin ja milloin | |
| Lähtötilanteen ja seurantatehtävien pisteet | Samat kriteerit, eri tapaukset | |
| Operatiivinen mittari ja nimittäjä | Esimerkiksi uudelleenkäsittelyaste 100 korvausvaatimusta kohden | |
| Arvioitu hyöty | Muutos kerrottuna hyväksytyllä yksikkökustannuksella | |
| Koulutukseen liittyvä osuus ja syy | Päättely, käytetty vertailu | |
| Toimitus- ja käyttökustannukset | Listattu erikseen | |
| Nettoarvio ja luottamus | Korkea, keskitaso tai matala, syy mukaan lukien | |
| Muita muutoksia kaudella | Työmäärä, henkilöstö, yhdistelmä, prosessi | |
| Suositeltava toiminta | Skaalaa, tarkista tai lopeta |
Päätä etukäteen, mikä oikeuttaisi kunkin toimenpiteen. Voit skaalata ohjelmaa, kun tehtävien pisteet paranivat aiemmin näkemissä tapauksissa, operatiiviset toimenpiteet kehittyivät odotettuun suuntaan, muita selityksiä tarkistettiin ja nettoarvio pysyy positiivisena varovaisten oletusten perusteella. Voit tarkistaa sitä, kun tehtävien pisteet paranivat, mutta operatiiviset toimenpiteet eivät, mikä viittaa koulutuksen ulkopuolisiin rajoituksiin. Voit lopettaa ohjelman, kun kumpikaan ei muuttunut. Sovi näistä säännöistä sponsorisi kanssa ennen kuin näet numerot, jotta tulos ei ratkaise kriteerejä.
Työskentele realistisen esimerkin avulla
Havainnollistava. Talouskumppanin ja tietotekniikan tai vaatimustenmukaisuudesta vastaavan henkilön tulisi validoida tapaus ja vastauskriteerit ennen käyttöä.
Tapaus. Tiimi suunnittelee korvausprosessin uudelleen samalla, kun henkilöstömäärä ja volyymit muuttuvat. Uudelleentyöskentely väheni kuuden kuukauden aikana koulutuksen jälkeen. Kaksi kokenutta koodaajaa lähti samana aikana, ja volyymi laski hieman toisella neljänneksellä.
Tehtävä. Oppija arvioi koulutuksen perusteella kohtuullisesti saatavat säästöt, selittää päätöksen, mainitsee todisteet ja nimeää vielä puuttuvat tiedot.
Ensimmäinen yritys. "Uudelleentyöstö väheni, joten koulutus säästi koko erotuksen. Kerroin pudotuksen uudelleentyöstökohtaisilla kustannuksillamme ja raportoin sen sijoitetun pääoman tuottoprosenttina." Tämä antaa koulutukselle hyvän aseman ja jättää muut muutokset huomiotta.
Palaute ja uudelleenyritys. Valmentaja kysyy, mikä muu muuttui, eroavatko koulutettu ja kouluttamaton henkilöstö toisistaan ja mistä yksikkökustannus tuli. Oppijaa pyydetään jakamaan hyöty.
Vahvempi yritys. "Uudelleentyöskentely väheni, mutta kaksi kokenutta koodaajaa lähti ja volyymi laski, joten en voi lukea sitä kokonaan koulutuksen ansioksi. Näkemättömien tapausten tehtäväpisteet nousivat, mikä tukee koulutuksen vaikutusta. Raportoisin havaitun säästön, perusteltavani pienentyneen osuuden ja alhaisen tai keskitason luotettavuuslukeman. Luottamuksen lisäämiseksi tarvitsen koulutetun ja kouluttamattoman henkilöstön tekemää uudelleentyöskentelyä sekä yksikkökustannusta rahoituksesta." Tämä erottaa havaitut säästöt aiheutuneista säästöistä ja kertoo, mitä todisteita puuttuu.
Arvioi kykyjä yksinkertaisella arviointimatriisilla
Pisteytä jokainen kriteeri asteikolla 0–2:
| Kriteeri | Havaittavissa oleva näyttö |
|---|---|
| Tehtävän suorittaminen | Mittaa koulutukseen liittyvän projektin kustannuksia ja hyötyjä ja kirjaa kutakin lukua tukevan näytön. |
| perustelut | Selittää rajoitukset, vaihtoehdot ja epävarmuuden sekä tarkistaa nettokustannusarviot ja attribuution luotettavuuden. |
| Rajat | Käyttää hyväksyttyjä menettelytapoja ja hakee apua, kun tiedot tai auktoriteetti eivät riitä. |
Ankkurit: 0 puuttuu tai sitä ei tueta, 1 on osittainen ja siinä on olennaisia puutteita, ja 2 on täydellinen ja perusteltu sovittujen kriteerien perusteella. Määrittele kriittiset virheet erikseen, kuten muutoksen täydellisen selittäminen koulutuksella ilman muiden syiden tarkistamista, jotta kokonaispistemäärä ei voi peittää niitä. Tämä arviointimatriisi on ehdotus, ei validoitu valmiusstandardi: mukauta sitä yhdessä ammattilaisen kanssa ja testaa sitä. Jotta jokainen toiminto voidaan sovittaa sen vaatimaan ajatteluun, katso oppaamme aiheesta. oppimistoimintojen yhdistäminen Bloomin taksonomiaan.
Missä interaktiivinen toimitus auttaa
Interaktiiviset formaatit auttavat silloin, kun ihmisten tulisi sitoutua ennen vastauksen kuulemista. Live-istunnossa fasilitaattori voi näyttää korvausvaatimustapauksen, pyytää jokaista henkilöä kirjoittamaan koulutukseen liittyvän säästöosuuden ja sitten näyttää eron ennen kuin keskustelee siitä, miksi arviot eroavat toisistaan. Sama tapaus voi valmistua omaan tahtiin. AhaSlides tukee interaktiivista oppimista ja siirtymistä live- ja omaan tahtiin tapahtuvan toimituksen välillä. Tarkista kaikki erityiset kirjoitus-, palaute- tai raportointitoiminnot, joihin aiot luottaa omaa työnkulkuasi vasten, ja käsittele tekoälyä, simulaattoreita ja järjestelmäintegraatioita ulkoisina tai vahvistamattomina, kunnes olet nähnyt niiden toimivan. Ohjeita formaattien valintaan on artikkelissamme aiheesta. milloin käyttää adaptiivista, interaktiivista ja reaaliaikaista oppimista.
Rajoitukset, jotka saattavat jäädä
- Nimeä. Ilman vertailuryhmää voit arvioida osuutta, etkä todistaa syytä.
- Viive. Joidenkin säästöjen näkyminen vie neljäsosanuotteja, ja lyhyellä aikavälillä ne voivat jäädä huomaamatta.
- Tietojen laatu. Operatiiviset tiedot voivat olla puutteellisia, tai niiden määritelmät voivat muuttua kesken ajanjakson.
- Muita muutoksia. Henkilöstö-, volyymi- ja maksajasäännöt voivat heikentää pientä koulutusvaikutusta.
- Siirto. Suoritus harjoitustilanteessa ei ole sama asia kuin suoritus päivittäisen paineen alla.
Mainitse nämä sponsoreille ajoissa. Koulutus parantaa ihmisten kykyjä. Se ei muuta työolosuhteita.
Usein kysyttyjä kysymyksiä
Mikä on laadunparannuskoulutuksen ROI?
Se vertaa koulutukseen kytketyn parannushankkeen hyötyjä sen kustannuksiin, yleensä jakamalla nettohyötyjä kustannuksilla. Keskeinen vaihe on eristää, kuinka paljon hyötyä koulutuksesta voidaan kohtuudella saada.
Voitko todistaa, että koulutus aiheutti säästöt?
Harvoin. Sovitettu vertailu tai vaiheittainen käyttöönotto antaa vahvempaa näyttöä, mutta useimmissa sairaalaympäristöissä raportoidaan pikemminkin perusteltu kontribuutio ja luottamustaso kuin todisteita.
Pitäisikö toimituskulut ja operatiiviset kulut laskea yhteen?
Raportoi ne erikseen. Toimituskustannukset kuvaavat itse koulutusta. Toimintakustannukset kuvaavat laajempaa parannusprojektia. Kerro, mitä kokonaissummaa sijoitetun pääoman tuottoprosenttisi käyttää.
Onko tyytyväisyyskyselyllä näyttöä säästöistä?
Ei. Tyytyväisyys ja valmistuminen ovat toimitusindikaattoreita. Säästöjen saavuttamiseksi tarvitaan tehtävien näyttöä ja operatiivista dataa.
Mistä aloittaa
Valitse yksi parannusprojekti, jolla on jo lähtötaso. Kirjoita analyysin tueksi päätös, listaa mukaan otettavat kustannukset, valitse yksi operatiivinen toimenpide nimittäjäineen ja pyydä rahoituskumppania hyväksymään yksikkökustannus. Laadi yksisivuinen raportti tuloskentät tyhjinä ja sovi mittakaava-, tarkistus- tai pysäytyssäännöistä ennen tietojen saapumista.
Jos haluat nähdä, kuinka tällainen tapaus voisi toimia livenä oman tiimisi kanssa ja kuinka sitä voitaisiin käyttää uudelleen omaan tahtiin jälkeenpäin, tutustu AhaSlides-sivustoon.
