Ett sjukhusteam omformar sitt arbetsflöde för ersättningsanspråk. De utbildar den administrativa personalen i den nya processen, och sex månader senare är kostnaden per ersättningsanspråk lägre. Ekonomiavdelningen är nöjd och frågar efter en siffra: hur mycket sparade utbildningen?
Det ärliga svaret är svårare än frågan. Under samma sex månader förändrades personalstyrkan, ersättningsvolymerna flyttades och en betalare ändrade sina regler. En del av besparingarna kom från omdesignen, en del från utbildningen och en del från inget av ovanstående. Avkastning på investeringen för kvalitetsförbättringsutbildning är arbetet med att separera dessa delar och rapportera det som återstår med en viss grad av säkerhet.
Detta är ett illustrativt scenario, inte ett dokumenterat fall. Denna guide är för sjukhusens utvecklingschefer och de informatik- eller compliance-ansvariga som arbetar med dem. Den behandlar hur man definierar jämförelsen, mäter den faktiska uppgiften, kopplar dessa bevis till operativa data, utesluter andra förklaringar och rapporterar resultat utan att överdriva.
Vad är ROI (avkastning på investering) för kvalitetsförbättringsutbildning?
ROI för kvalitetsförbättringsutbildning jämför fördelarna med ett utbildningsrelaterat förbättringsprojekt med dess kostnader. Den frågar vad organisationen vann som den inte skulle ha vunnit utan utbildningen, och om den vinsten var värd vad utbildningen och projektet kostade. Den vanligaste formen är enkel: nettovinster (vinster minus kostnader) dividerat med kostnader, visat som en procentandel.
Aritmetiken är den enkla delen. Den svåra delen är att avgöra vilka fördelar som hör till utbildningen. ROI Institute, som förespråkar ett utvärderingsramverk i fem nivåer, listar "isolera projekteffekter" som ett eget steg vid analys av data (ROI-institutetDess fem nivåer är reaktion, lärande, tillämpning, effekt och avkastning på investeringen. Nöjdhet och slutförande finns på den första nivån. De är användbara leveransindikatorer, men de är inte bevis på besparingar.
Snabb fakta
| Fråga | Kort svar |
|---|---|
| Vad är uppgiften? | Mät kostnaden och fördelarna med ett utbildningsrelaterat förbättringsprojekt. |
| Vad får du i poäng? | Nettokostnadsuppskattningar och tillförlitligheten i attributionen. |
| Räcker det med en nöjdhetsundersökning? | Nej. Det visar hur kursen mottogs, inte vad den räddade. |
| Vem validerar metoden? | En finanspartner och en ansvarig för informatik eller compliance. |
| Vad kan träning inte åtgärda? | Personalförändringar, volymsvängningar och betalningsregler sker samtidigt. |
| Hur vet du att det fungerade? | En jämförelse av baslinje- och uppföljningsuppgifter plus operativa data, med andra orsaker kontrollerade. |
1. Definiera resultatet och jämförelsen
Innan du samlar in data, skriv ner tre saker: interventionen, de berörda rollerna och det beslut som analysen måste stödja. "Sparade utbildningen pengar?" är för vagt. "Bör vi utöka arbetsflödesprogrammet för skadeanmälningar till den andra platsen?" är ett beslut, och det talar om vilka bevis som skulle vara tillräckliga.
Separera sedan två typer av kostnader. Leveranskostnader täcka designtid, handledares eller coachtid, elevtimmar, material och eventuell programvara. Driftskostnader Täck över förändringarna i själva processen: nya verktyg, reviderade procedurer, tillfällig dubbelkörning medan personalen lär sig den nya metoden. En utbildnings-ROI som bara räknar leveranskostnader smickrar programmet. En ROI som räknar allt kan vara rätt mått för förbättringsprojektet men orättvist mot utbildningen. Bestäm vilken fråga du besvarar och ange det i rapporten.
Personalens tid förtjänar omsorg. Timmar som läggs ner på utbildning är en verklig kostnad även när ingen skickar en faktura, så registrera dem med en avgift som din finansieringspartner godkänner.
2. Mät den faktiska uppgiften
Uppgiften här är inte att "närvara vid programmet". Det är något eleven gör på jobbet, som att korrigera påståenden mot den nya checklistan, koda avslag per orsak eller registrera ett undantag. Mät det med hjälp av observerbara bevis.
- Sätt en baslinje före utbildning: ett urval av verkliga eller realistiska uppgifter som poängsätts mot överenskomna kriterier.
- Gör en jämförbar bedömning efter träning, använda nya uppgifter av liknande svårighetsgrad snarare än de som eleverna övade på.
- Behåll slutförandet och tillfredsställelsen som leveransindikatorer, rapporterade separat.
Det är här som bevis på uppgifter förtjänar sin plats. Om personalen nu kan utföra uppgiften mer exakt i osedda fall blir kopplingen mellan utbildning och eventuella operativa förändringar rimlig. Om de inte kan det är det osannolikt att utbildningen kommer att åstadkomma en besparing. För mer information om skrivövning och feedback som är kopplad till en uppgift, se vår guide till utforma interaktiv praktik med användbar feedback.
3. Koppla samman uppgiftsbevis med operativa data
Placera nu uppgiftsbevisen bredvid de operativa uppgifterna. För varje åtgärd, registrera fyra saker: populationen (vem som ingår), nämnaren (per anspråk, per anställd eller per månad), perioden och källan.
Vanliga mått i administrativa förbättringsprojekt inkluderar omarbetningsfrekvens, andelen avslagna reklamationer av undvikbara skäl, tid det tar att slutföra en uppgift och kostnaden per transaktion. Omvandla varje ändring till pengar endast med en enhetskostnad som din finansieringspartner har godkänt. Ta sedan fram den siffra som är relevant:
- Uppskattad nytta: förändringen i mått multiplicerad med den överenskomna enhetskostnaden.
- Andel hänförd till utbildning: en motiverad procentandel, inte en gissning, med resonemanget nedskrivet.
- Nettouppskattning: tillskriven nytta minus de utbildnings- och projektkostnader du valt att inkludera.
Behandla en rimlig länk som en rimlig länk. En minskning av omarbetning efter träning är förenlig med att träningen fungerade. Det bevisar inte att den gjorde det.
4. Redogöra för alternativa förklaringar
Gå igenom vad som mer förändrats under jämförelseperioden. En kort checklista hjälper:
- Arbetsbelastning. Ökade eller minskade volymerna? Ett lugnare kvartal innebär ofta färre fel.
- Bemanning. Har erfarna personer slutat, eller har nya ankommit som aldrig fått utbildning?
- Kund- eller betalarmix. Har typerna av skadeanmälningar förändrats?
- Process- eller systemförändringar. Förändrades något annat i arbetsflödet samtidigt?
Använd en jämförelse där det är möjligt. matchad jämförelse tittar på ett liknande lag som ännu inte har haft utbildningen. stegvis utbyggnad ger dig den jämförelsen nästan gratis: de team som tränas senare fungerar som kontroll för de team som tränas först. Ingetdera är alltid möjligt på ett sjukhus, där varje team kan behöva förändringen samtidigt, och i så fall rapporterar du ärligt en lägre konfidensnivå.
En granskning i BMC Health Services Research från 2022 om avkastningen på storskalig kvalitetsförbättring inom hälso- och sjukvården är användbar här. Författarna definierar avkastning brett, som allt monetärt eller icke-monetärt värde som härrör från kvalitetsförbättring, och påpekar att resultaten är sammanlänkade och svåra att observera. De föreslår att man bedömer bidrag till resultaten snarare än att göra anspråk på direkt tillskrivning, och kallar traditionell ROI för "en distal och en ofullständig markör för QI-värde" (Thusini et al., BMC Health Services Research, 2022). Det passar även administrativa projekt. Rapportera bevisen på bidraget och det förtroende du har för det, inte en enda siffra med falsk precision.
5. Rapportera resultaten och välj nästa åtgärd
En rapport som en finanskommitté kan agera på får plats på en sida. Denna exempellayout lämnar resultatfälten avsiktligt tomma. Fyll dem med dina egna data, aldrig med lånade effektstorlekar.
| Fält | Vad som ska spelas in | Resultat |
|---|---|---|
| Intervention och roller | Program, projekt och vilka som deltog | |
| Befolkning och period | Vilka är inkluderade, från när till när | |
| Poäng för baslinje- och uppföljningsuppgifter | Samma kriterier, olika fall | |
| Operativt mått och nämnare | Till exempel omarbetningsfrekvens per 100 reklamationer | |
| Beräknad nytta | Förändring multiplicerad med godkänd enhetskostnad | |
| Andel som tillskrivs utbildning och varför | Resonemang, jämförelse använd | |
| Leverans- och driftskostnader | Listas separat | |
| Nettouppskattning och konfidens | Hög, medel eller låg, med anledningen | |
| Andra förändringar under perioden | Arbetsbelastning, bemanning, mix, process | |
| Rekommenderad åtgärd | Skala, revidera eller stoppa |
Bestäm i förväg vad som skulle motivera varje åtgärd. Du kan skala upp programmet när uppgiftsresultaten förbättrades i osynliga fall, operativa åtgärder rörde sig i förväntad riktning, andra förklaringar kontrollerades och nettouppskattningen förblir positiv baserat på försiktiga antaganden. Du kan revidera det när uppgiftsresultaten förbättrades men operativa åtgärder inte gjorde det, vilket tyder på begränsningar utanför utbildningen. Du kan stoppa det när ingen av dem rörde sig. Kom överens om dessa regler med din sponsor innan du ser siffrorna, så att resultatet inte avgör kriterierna.
Arbeta igenom ett realistiskt exempel
Illustrativt. En finanspartner och en IT- eller compliance-ansvarig bör validera ärendet och svarskriterierna före användning.
Fallet. Ett team omformar ett arbetsflöde för skadeanmälningar samtidigt som bemanning och volymer också förändras. Omarbetningen minskade under de sex månaderna efter utbildningen. Två erfarna kodare slutade under samma period och volymen minskade något under andra kvartalet.
Uppgiften. Eleven uppskattar de besparingar som utbildningen rimligen kan göra gällande, förklarar beslutet, citerar bevisen och anger den information som fortfarande saknas.
Ett första försök. "Omarbetet minskade, så utbildningen räddade hela skillnaden. Jag multiplicerade minskningen med vår kostnad per omarbete och rapporterade det som ROI." Detta tillskriver utbildningen allt och ignorerar de andra ändringarna.
Feedback och försök igen. Coachen frågar vad som mer har förändrats, om det finns skillnader mellan utbildad och outbildad personal och var enhetskostnaden kommer ifrån. Eleven ombeds att dela upp nyttan.
Ett starkare försök. "Omarbetet minskade, men två erfarna kodare slutade och volymen minskade, så jag kan inte tillskriva allt detta till utbildning. Uppgiftspoängen på osedda fall ökade, vilket stöder ett utbildningsbidrag. Jag skulle rapportera den observerade besparingen, en minskad andel som jag kan motivera och ett lågt till medelhögt konfidensbetyg. För att öka förtroendet behöver jag omarbete av utbildad och outbildad personal, och enhetskostnaden från ekonomi." Detta separerar observerade besparingar från orsakade besparingar och anger vilka bevis som saknas.
Bedöm förmåga med en enkel matris
Poängsätt varje kriterium från 0 till 2:
| Kriterium | Observerbara bevis |
|---|---|
| Uppgiftskörning | Mäter kostnaden och fördelarna med ett utbildningsrelaterat projekt och registrerar bevisen som stöder varje siffra. |
| Resonemang | Förklarar begränsningar, alternativ och osäkerhet, och kontrollerar nettokostnadsuppskattningar och tillförlitligheten i tillskrivningen. |
| Gränser | Använder godkända rutiner och söker hjälp när information eller befogenheter är otillräckliga. |
Ankare: 0 är frånvarande eller saknar stöd, 1 är partiell med relevanta utelämnanden och 2 är fullständig och motiverad mot de överenskomna kriterierna. Definiera kritiska fel separat, såsom att tillskriva hela förändringen till utbildning utan kontroll av andra orsaker, så att en övergripande poäng inte kan dölja ett. Denna bedömningsmatris är ett förslag, inte en validerad beredskapsstandard: anpassa den med utövaren och testa den. För att matcha varje aktivitet med det tänkande den kräver, se vår guide till matcha läraktiviteter med Blooms taxonomi.
Där interaktiv leverans hjälper
Interaktiva format hjälper till där folk bör binda sig innan de hör svaret. I en live-session kan en handledare visa påståendet, be varje person att skriva in andelen av besparingen de skulle tillskriva utbildning och sedan visa spridningen innan de diskuterar varför uppskattningarna skiljer sig åt. Samma fall kan köras i självstudier för förberedelser. AhaSlides stöder interaktivt lärande och växling mellan live- och självstudier. Kontrollera eventuella specifika funktioner för redigering, feedback eller rapportering som du planerar att förlita dig på mot ditt eget arbetsflöde och behandla AI, simulatorer och systemintegrationer som externa eller obekräftade tills du har sett dem fungera. För vägledning om val av format, se vår artikel om när man ska använda adaptiv, interaktiv och liveinlärning.
Begränsningar som kan finnas kvar
- Erkännande. Utan en jämförelsegrupp kan man uppskatta ett bidrag, inte bevisa en orsak.
- Tidsfördröjning. Vissa besparingar tar färre cent för att synas, och ett kort fönster kan missa dem.
- Datakvalitet. Operativa data kan vara ofullständiga, eller dess definitioner kan ändras mitt i perioden.
- Andra förändringar. Bemannings-, volym- och betalningsregler kan överskölja en liten utbildningseffekt.
- Överföra. Prestation i ett träningsfall är inte detsamma som prestation under daglig press.
Nämn dessa för sponsorer tidigt. Utbildning förbättrar vad människor kan göra. Den förändrar inte förutsättningarna kring arbetet.
Vanliga frågor och svar
Vad är ROI (avkastning på investering) för kvalitetsförbättringsutbildning?
Den jämför fördelarna med ett utbildningsrelaterat förbättringsprojekt med dess kostnader, vanligtvis som nettovinster dividerade med kostnader. Det viktigaste steget är att isolera hur stor del av nyttan utbildningen rimligen kan göra anspråk på.
Kan du bevisa att utbildningen orsakade besparingarna?
Sällan. En matchad jämförelse eller en stegvis utrullning ger starkare bevis, men i de flesta sjukhusmiljöer rapporterar man ett motiverat bidrag och en konfidensnivå snarare än bevis.
Ska leveranskostnader och driftskostnader räknas tillsammans?
Rapportera dem separat. Leveranskostnader beskriver själva utbildningen. Driftskostnader beskriver det bredare förbättringsprojektet. Ange vilken totalsumma din ROI använder.
Är en nöjdhetsundersökning bevis på besparingar?
Nej. Nöjdhet och slutförande är leveransindikatorer. Besparingar behöver bevis på uppgifter och operativa data.
Var ska man börja
Välj ett förbättringsprojekt som redan har en baslinje. Skriv det beslut som analysen måste stödja, lista de kostnader du kommer att inkludera, välj ett operativt mått med dess nämnare och låt en finanspartner godkänna enhetskostnaden. Utarbeta den ensidiga rapporten med resultatfälten tomma och godkänn reglerna för skala, revidering eller stopp innan data anländer.
För att se hur ett sådant här fall kan köras live med ditt eget team och återanvändas i din egen takt efteråt, utforska AhaSlides.
