Een ziekenhuisteam herontwerpt de workflow voor declaraties. Het administratieve personeel wordt getraind in het nieuwe proces en zes maanden later zijn de kosten per declaratie lager. De financiële afdeling is tevreden en vraagt naar de exacte cijfers: hoeveel heeft de training bespaard?
Het eerlijke antwoord is lastiger dan de vraag. In diezelfde periode van zes maanden veranderde de personeelsbezetting, de hoeveelheid declaraties en wijzigde een zorgverzekeraar zijn regels. Een deel van de besparing kwam voort uit de herinrichting, een deel uit de training en een deel uit geen van beide. Het rendement op investering (ROI) van kwaliteitsverbeteringstrainingen is het scheiden van deze onderdelen en het rapporteren van wat overblijft met een aangegeven mate van betrouwbaarheid.
Dit is een illustratief scenario, geen gedocumenteerd geval. Deze handleiding is bedoeld voor directeuren L&D in ziekenhuizen en de informatica- of compliance-medewerkers die met hen samenwerken. Het beschrijft hoe de vergelijking te definiëren, de daadwerkelijke taak te meten, dat bewijs te koppelen aan operationele gegevens, andere verklaringen uit te sluiten en resultaten te rapporteren zonder te overdrijven.
Wat is het rendement op investering (ROI) van trainingen voor kwaliteitsverbetering?
De ROI (Return on Investment) van kwaliteitsverbeteringstrainingen vergelijkt de voordelen van een aan training gekoppeld verbeteringsproject met de kosten ervan. De vraag is wat de organisatie heeft gewonnen dat ze zonder de training niet zou hebben gewonnen, en of die winst de kosten van de training en het project waard was. De meest gebruikelijke vorm is eenvoudig: netto baten (baten min kosten) gedeeld door de kosten, weergegeven als een percentage.
Het rekenwerk is het makkelijke deel. Het lastige is bepalen welke voordelen aan de training toe te schrijven zijn. Het ROI Institute, dat een evaluatiekader met vijf niveaus promoot, noemt "projecteffecten isoleren" als een aparte stap bij het analyseren van de gegevens.ROI InstituutDe vijf niveaus zijn reactie, leren, toepassing, impact en ROI. Tevredenheid en voltooiing bevinden zich op het eerste niveau. Het zijn nuttige indicatoren voor de uitvoering, maar ze zijn geen bewijs van besparingen.
Faktenüberblick
| Vraag | Kort antwoord |
|---|---|
| Wat is de taak? | Meet de kosten en baten van een verbeteringsproject dat gekoppeld is aan training. |
| Wat is je score? | Netto kostenramingen en het vertrouwen in de toewijzing. |
| Is een tevredenheidsonderzoek voldoende? | Nee. Het laat zien hoe de cursus werd ontvangen, niet wat er bespaard is. |
| Wie valideert de methode? | Een financiële partner en een leidinggevende op het gebied van informatica of compliance. |
| Wat kan training niet oplossen? | Personeelswijzigingen, schommelingen in het behandelvolume en veranderingen in de regels van zorgverzekeraars vinden allemaal tegelijkertijd plaats. |
| Hoe weet je dat het gelukt is? | Een vergelijking van de basismeting en de vervolgmeting, plus operationele gegevens, waarbij andere oorzaken zijn gecontroleerd. |
1. Definieer de uitkomst en de vergelijking
Voordat je gegevens verzamelt, noteer je drie dingen: de interventie, de betrokken rollen en de beslissing die de analyse moet ondersteunen. "Heeft de training geld bespaard?" is te vaag. "Moeten we het programma voor de afhandeling van schadeclaims uitbreiden naar de tweede locatie?" is een beslissing en geeft aan welk bewijs voldoende zou zijn.
Scheid vervolgens de twee soorten kosten. Bezorgkosten De kosten dekken de ontwerptijd, de tijd van de begeleider of coach, de uren van de cursist, materialen en eventuele software. Operationele kosten Beschrijf de veranderingen in het proces zelf: nieuwe tools, herziene procedures, tijdelijke dubbele uitvoering terwijl medewerkers de nieuwe methode leren. Een ROI van de training die alleen de uitvoeringskosten meetelt, geeft een vertekend beeld van het programma. Een ROI die alles meetelt, is misschien wel de juiste maatstaf voor het verbeteringsproject, maar oneerlijk voor de training zelf. Bepaal welke vraag je beantwoordt en vermeld dit in het rapport.
De tijd van medewerkers verdient zorgvuldigheid. Uren besteed aan training zijn een reële kostenpost, zelfs als er geen factuur wordt verstuurd. Registreer deze uren daarom tegen een tarief waarmee uw financiële partner akkoord gaat.
2. Meet de daadwerkelijke taak
De taak hier is niet "het programma bijwonen". Het gaat om iets wat de cursist op het werk doet, zoals het corrigeren van beweringen aan de hand van de nieuwe checklist, het coderen van afwijzingen op basis van de oorzaak of het registreren van een uitzondering. Meet dat, met behulp van observeerbaar bewijs.
- Stel een basislijn in Voorafgaand aan de training: een reeks echte of realistische taken die worden beoordeeld aan de hand van overeengekomen criteria.
- Voer een vergelijkende beoordeling uit. Na de training worden nieuwe taken van vergelijkbare moeilijkheidsgraad gebruikt in plaats van de taken waarmee de cursisten hebben geoefend.
- Zorg voor een bevredigende afronding en tevredenheid. als leveringsindicatoren, die afzonderlijk worden gerapporteerd.
Dit is waar bewijs uit de praktijk zijn waarde bewijst. Als medewerkers de taak nu nauwkeuriger kunnen uitvoeren op onbekende casussen, wordt het verband tussen training en operationele veranderingen aannemelijk. Als ze dat niet kunnen, is het onwaarschijnlijk dat de besparing aan de training te danken is. Voor meer informatie over het schrijven van oefeningen en feedback die gekoppeld zijn aan een taak, zie onze handleiding. Interactieve oefeningen ontwerpen met nuttige feedback.
3. Koppel bewijsmateriaal uit taken aan operationele gegevens.
Leg nu de taakgegevens naast de operationele gegevens. Noteer voor elke meting vier zaken: de populatie (wie is inbegrepen), de noemer (per aanvraag, per medewerker of per maand), de periode en de bron.
Gangbare meetinstrumenten in projecten voor administratieve verbetering zijn onder andere het herwerkpercentage, het percentage claims dat om vermijdbare redenen wordt afgewezen, de tijd die nodig is om een taak te voltooien en de kosten per transactie. Zet elke wijziging om in geld, maar alleen met een eenheidskostprijs die uw financiële partner heeft goedgekeurd. Bereken vervolgens het cijfer dat er echt toe doet:
- Geschatte baten: de verandering in de meting vermenigvuldigd met de overeengekomen eenheidskosten.
- Aandeel toegeschreven aan training: een onderbouwd percentage, geen gok, met de redenering erbij vermeld.
- Netto schatting: Toegerekend voordeel minus de opleidings- en projectkosten die u hebt besloten mee te nemen.
Beschouw een aannemelijk verband als een aannemelijk verband. Een afname van herwerk na de training is consistent met het feit dat de training effectief was. Het bewijst echter niet dat de training effectief was.
4. Houd rekening met alternatieve verklaringen
Ga na welke andere veranderingen er tijdens de vergelijkingsperiode hebben plaatsgevonden. Een korte checklist kan daarbij helpen:
- Werkdruk. Zijn de volumes gestegen of gedaald? Een rustiger kwartaal betekent vaak minder fouten.
- Personeel. Zijn er ervaren mensen vertrokken, of zijn er nieuwe mensen bijgekomen die nooit een opleiding hebben gevolgd?
- Klant- of betalersmix. Zijn de soorten claims veranderd?
- Proces- of systeemwijzigingen. Zijn er tegelijkertijd nog andere wijzigingen in de workflow doorgevoerd?
Gebruik waar mogelijk een vergelijking. overeenkomende vergelijking kijkt naar een vergelijkbaar team dat de training nog niet had gehad. gefaseerde uitrol Dit geeft je die vergelijking vrijwel gratis: de teams die later getraind worden, fungeren als controlegroep voor de teams die als eerste getraind worden. In een ziekenhuis is dit niet altijd mogelijk, omdat elk team de verandering mogelijk tegelijkertijd nodig heeft. In dat geval geef je eerlijk gezegd een lager betrouwbaarheidsniveau aan.
Een overzichtsartikel uit 2022 in BMC Health Services Research over het rendement van grootschalige kwaliteitsverbetering in de gezondheidszorg is hier relevant. De auteurs definiëren rendement breed, als elke monetaire of niet-monetaire waarde die voortvloeit uit kwaliteitsverbetering, en wijzen erop dat uitkomsten onderling verbonden zijn en moeilijk waar te nemen. Ze stellen voor om de bijdrage aan de uitkomsten te beoordelen in plaats van een directe toeschrijving te claimen, en noemen de traditionele ROI "een indirecte en onvolledige indicator van de waarde van kwaliteitsverbetering".Thusini et al., BMC Health Services Research, 2022Dat geldt ook voor administratieve projecten. Rapporteer het bewijs van de bijdrage en het vertrouwen dat je erin hebt, niet een enkel cijfer met een valse precisie.
5. Rapporteer de resultaten en kies de volgende actie.
Een rapport waarop een financiële commissie actie kan ondernemen, past op één pagina. In deze voorbeeldindeling zijn de resultaatvelden opzettelijk leeg gelaten. Vul ze in met uw eigen gegevens, nooit met overgenomen effectgroottes.
| Veld | Wat moet je vastleggen? | Resultaat |
|---|---|---|
| Interventie en rollen | Programma, project en wie eraan heeft deelgenomen | |
| Bevolking en periode | Wie is inbegrepen, van wanneer tot wanneer | |
| Basisscores en vervolgscores van de taken | Dezelfde criteria, verschillende gevallen | |
| Operationele maat en noemer | Bijvoorbeeld het herwerkpercentage per 100 claims. | |
| Geschat voordeel | Wisselgeld vermenigvuldigd met de goedgekeurde eenheidsprijs | |
| Deelname toegeschreven aan training en waarom | Redenering, vergelijking gebruikt | |
| Leverings- en operationele kosten | Apart vermeld | |
| Netto schatting en betrouwbaarheid | Hoog, gemiddeld of laag, met de bijbehorende reden. | |
| Andere veranderingen in die periode | Werkdruk, personeelsbezetting, mix, proces | |
| Aanbevolen actie | Schaal aanpassen, herzien of stoppen |
Bepaal van tevoren wat elke actie rechtvaardigt. Je zou het programma kunnen opschalen als de taakscores verbeteren in onbekende gevallen, de operationele indicatoren de verwachte richting opgaan, andere verklaringen zijn gecontroleerd en de netto-schatting positief blijft bij voorzichtige aannames. Je zou het programma kunnen herzien als de taakscores verbeteren, maar de operationele indicatoren niet, wat wijst op beperkingen buiten de training. Je zou het programma kunnen stopzetten als geen van beide verandert. Spreek deze regels af met je sponsor voordat je de cijfers ziet, zodat het resultaat niet bepalend is voor de criteria.
Werk een realistisch voorbeeld uit.
Ter illustratie. Een financiële partner en een informatica- of compliance-expert dienen de casus en de antwoordcriteria te valideren alvorens deze te gebruiken.
De zaak. Een team herontwerpt een workflow voor schadeclaims, terwijl ook de personeelsbezetting en het volume veranderen. Het aantal herwerkzaamheden daalde in de zes maanden na de training. Twee ervaren codeerders vertrokken in dezelfde periode en het volume daalde licht in het tweede kwartaal.
De taak. De cursist schat de redelijke besparingen in die de training kan opleveren, licht de beslissing toe, noemt het bewijsmateriaal en benoemt de informatie die nog ontbreekt.
Een eerste poging. "Het aantal herwerkzaamheden daalde, dus de training heeft het hele verschil bespaard. Ik heb de daling vermenigvuldigd met onze kosten per herwerkbeurt en dat als ROI gerapporteerd." Hier wordt alles toegeschreven aan de training en worden de andere veranderingen genegeerd.
Feedback en opnieuw proberen. De coach vraagt wat er nog meer veranderd is, of er verschillen zijn tussen het getrainde en ongetrainde personeel en waar de eenheidskosten vandaan komen. De cursist wordt gevraagd de voordelen te delen.
Een serieuzere poging. "Het aantal herwerkzaamheden daalde, maar twee ervaren codeerders vertrokken en het volume nam af, dus ik kan het niet volledig toeschrijven aan training. De scores voor onbekende gevallen stegen, wat een bijdrage van training ondersteunt. Ik zou de waargenomen besparing rapporteren, een verlaagd aandeel dat ik kan rechtvaardigen, en een lage tot gemiddelde betrouwbaarheidsscore. Om de betrouwbaarheid te verhogen, heb ik gegevens nodig over herwerkzaamheden door zowel getraind als ongetraind personeel, en de eenheidskosten van de financiële afdeling." Dit scheidt de waargenomen besparingen van de veroorzaakte besparingen en geeft aan welk bewijs ontbreekt.
Beoordeel de vaardigheden met een eenvoudige beoordelingsmatrix.
Geef elk criterium een score van 0 tot 2:
| Criterium | Observeerbaar bewijs |
|---|---|
| Taakuitvoering | Het meet de kosten en baten van een aan training gekoppeld project en registreert het bewijsmateriaal ter ondersteuning van elk cijfer. |
| Redenering | Het document legt beperkingen, alternatieven en onzekerheden uit en controleert de schattingen van de nettokosten en het vertrouwen in de toewijzing van de oorzaak. |
| Grenzen | Volgt goedgekeurde procedures en zoekt hulp wanneer informatie of bevoegdheid ontoereikend is. |
Ankers: 0 is afwezig of niet onderbouwd, 1 is gedeeltelijk met relevante weglatingen en 2 is volledig en gerechtvaardigd op basis van de overeengekomen criteria. Definieer kritieke fouten afzonderlijk, zoals het volledig toeschrijven van de verandering aan training zonder te controleren op andere oorzaken, zodat een algemene score een dergelijke fout niet kan verbergen. Deze rubric is een voorstel, geen gevalideerde gereedheidsnorm: pas deze aan in overleg met de professional en test deze in een pilotproject. Raadpleeg onze handleiding om elke activiteit af te stemmen op de denkwijze die deze vereist. Leeractiviteiten afstemmen op de taxonomie van Bloom..
Waar interactieve levering helpt
Interactieve formats helpen mensen om zich te committeren voordat ze het antwoord horen. In een live sessie kan een facilitator de casus presenteren, elke deelnemer vragen om het percentage van de besparing te typen dat ze aan training zouden toeschrijven, en vervolgens de spreiding laten zien voordat wordt besproken waarom de schattingen verschillen. Dezelfde casus kan in een zelfstudie-modus worden doorlopen ter voorbereiding. AhaSlides ondersteunt interactief leren en de overgang tussen live en zelfstudie. Controleer of specifieke auteurs-, feedback- of rapportagefuncties die u wilt gebruiken, aansluiten op uw eigen workflow en beschouw AI, simulators en systeemintegraties als extern of onbevestigd totdat u ze in de praktijk hebt gezien. Zie ons artikel over het kiezen van formats voor meer informatie. Wanneer moet je adaptief, interactief en live leren inzetten?.
Mogelijke beperkingen die kunnen blijven bestaan
- Attribution. Zonder een vergelijkingsgroep kun je een bijdrage schatten, maar geen oorzaak bewijzen.
- Tijdsvertraging. Sommige spaarbedragen verschijnen pas na een paar kwartalen, en in een korte periode kun je ze mislopen.
- Gegevenskwaliteit. Operationele gegevens kunnen onvolledig zijn, of de definities ervan kunnen halverwege de periode veranderen.
- Andere wijzigingen. Personeelsbezetting, werkdruk en betalingsregels kunnen een klein trainingseffect tenietdoen.
- Transfer. Prestaties in een oefensituatie zijn niet hetzelfde als prestaties onder dagelijkse druk.
Geef deze punten vroegtijdig door aan de sponsors. Training verbetert wat mensen kunnen doen. Het verandert niets aan de omstandigheden waaronder het werk wordt uitgevoerd.
Veelgestelde vragen
Wat is het rendement op investering (ROI) van trainingen voor kwaliteitsverbetering?
Het vergelijkt de voordelen van een aan training gekoppeld verbeteringsproject met de kosten ervan, meestal als netto baten gedeeld door kosten. De cruciale stap is vaststellen welk deel van de voordelen terecht aan de training kan worden toegeschreven.
Kunt u bewijzen dat de training de oorzaak was van de besparingen?
Zelden. Een vergelijkende studie met gestandaardiseerde gegevens of een gefaseerde uitrol levert sterker bewijs op, maar in de meeste ziekenhuisomgevingen rapporteer je een gerechtvaardigde bijdrage en een betrouwbaarheidsniveau in plaats van een volledig bewijs.
Moeten bezorgkosten en operationele kosten samen worden gerekend?
Rapporteer ze afzonderlijk. Leveringskosten hebben betrekking op de training zelf. Operationele kosten hebben betrekking op het bredere verbeteringsproject. Geef aan welk totaalbedrag uw ROI gebruikt.
Is een tevredenheidsonderzoek een bewijs van besparingen?
Nee. Tevredenheid en voltooiing zijn leveringsindicatoren. Besparingen vereisen bewijs van uitgevoerde taken en operationele gegevens.
Waar te beginnen
Kies een verbeteringsproject dat al een basislijn heeft. Formuleer de beslissing die de analyse moet ondersteunen, geef een overzicht van de kosten die u wilt meenemen, kies een operationele maatstaf met de bijbehorende noemer en laat een financiële partner de eenheidskosten goedkeuren. Stel een rapport van één pagina op met lege resultaatvelden en spreek de schaal-, revisie- of stopregels af voordat de gegevens binnenkomen.
Om te zien hoe een dergelijke casus in de praktijk met uw eigen team kan worden toegepast en daarna in eigen tempo opnieuw kan worden gebruikt, kunt u AhaSlides bekijken.
