Nemocniční tým přepracuje svůj pracovní postup pro vyřizování pojistných událostí. Proškolí administrativní personál v novém procesu a o šest měsíců později jsou náklady na pojistnou událost nižší. Finanční úřad je spokojen a ptá se na číslo: kolik školení ušetřilo?
Upřímná odpověď je těžší než otázka. Během stejných šesti měsíců se změnilo obsazení personálu, zvýšil se objem pojistných událostí a jeden plátce změnil svá pravidla. Část úspor pochází z přepracování, část ze školení a část z ničeho z výše uvedeného. Návratnost investic do školení pro zlepšení kvality je úkolem oddělit tyto části a s určitou mírou spolehlivosti vykázat, co zbývá.
Toto je ilustrativní scénář, nikoli zdokumentovaný případ. Tato příručka je určena pro ředitele oddělení vzdělávání a rozvoje v nemocnicích a pro vedoucí pracovníky informatiky nebo compliance, kteří s nimi spolupracují. Zabývá se tím, jak definovat srovnání, měřit skutečný úkol, propojit tyto důkazy s provozními daty, vyloučit jiná vysvětlení a hlásit výsledky bez přehnaného tvrzení.
Co je návratnost investic (ROI) do školení pro zlepšování kvality?
Návratnost investic (ROI) v oblasti školení zaměřujícího se na zlepšování kvality porovnává přínosy projektu zlepšování spojeného se školením s jeho náklady. Ptá se, co organizace získala, co by bez školení nezískala, a zda tento zisk stál za to, kolik školení a projekt stály. Nejběžnější forma je jednoduchá: čisté přínosy (přínosy mínus náklady) dělené náklady, vyjádřené v procentech.
Matematika je snadná část. Těžší je rozhodnout se, které výhody patří ke školení. Institut ROI, který propaguje pětistupňový hodnotící rámec, uvádí jako svůj vlastní krok při analýze dat „izolaci efektů projektu“ (Institut návratnosti investic). Jeho pět úrovní je reakce, učení, aplikace, dopad a návratnost investic. Spokojenost a dokončení se nacházejí na první úrovni. Jsou to užitečné ukazatele realizace, ale nejsou důkazem úspor.
Rychlá fakta
| Otázka | Stručná odpověď |
|---|---|
| Jaký je úkol? | Změřte náklady a přínosy projektu zlepšování spojeného se školením. |
| Jaké skóre dosáhnete? | Odhady čistých nákladů a důvěra v atribuci. |
| Stačí průzkum spokojenosti? | Ne. Ukazuje to, jak byl kurz přijat, ne co ušetřil. |
| Kdo validuje metodu? | Finanční partner a vedoucí oddělení informatiky nebo compliance. |
| Co trénink nemůže vyřešit? | Současně dochází ke změnám v obsazení personálu, výkyvům objemů a pravidlům pro plátce. |
| Jak víš, že to fungovalo? | Porovnání výchozích a následných úkolů plus provozních dat s kontrolou dalších příčin. |
1. Definujte výsledek a srovnání
Než začnete shromažďovat jakákoli data, zapište si tři věci: intervenci, dotčené role a rozhodnutí, které musí analýza podpořit. Otázka „Ušetřilo školení peníze?“ je příliš vágní. „Měli bychom rozšířit program pro vyřizování reklamací na druhé pracoviště?“ je rozhodnutí a říká vám, jaké důkazy by byly dostatečné.
Pak oddělte dva druhy nákladů. náklady na dopravu pokrýt čas na návrh, čas facilitátora nebo kouče, hodiny studentů, materiály a veškerý software. Provozní náklady Zahrňte změny samotného procesu: nové nástroje, revidované postupy, dočasné zdvojení, zatímco se zaměstnanci učí novou metodu. Návratnost investic do školení, která započítává pouze náklady na dodání, lichotí programu. Návratnost investic, která započítává vše, může být správným měřítkem pro projekt zlepšování, ale nespravedlivá vůči školení. Rozhodněte se, na kterou otázku odpovídáte, a uveďte to ve zprávě.
Čas zaměstnanců si zaslouží pozornost. Hodiny strávené školením představují skutečný náklad, i když nikdo nepošle fakturu, proto je zaznamenávejte s využitím sazby, na které se dohodne váš finanční partner.
2. Změřte skutečný úkol
Úkolem zde není „účastnit se programu“. Je to něco, co student dělá v práci, například opravuje tvrzení oproti novému kontrolnímu seznamu, kóduje zamítnutí podle příčiny nebo zaznamenává výjimku. Změřte to pomocí pozorovatelných důkazů.
- Nastavte základní linii před školením: vzorek skutečných nebo realistických úkolů hodnocených podle dohodnutých kritérií.
- Proveďte srovnatelné hodnocení po školení používat nové úkoly podobné obtížnosti, nikoli ty, na kterých si studenti procvičovali.
- Udržujte si dokončení a spokojenost jako ukazatele realizace, vykazované samostatně.
A právě zde si důkazy o úkolu zaslouží své místo. Pokud nyní zaměstnanci dokáží úkol přesněji vykonávat i v neviditelných případech, stává se souvislost mezi školením a jakoukoli provozní změnou věrohodnou. Pokud to nedokážou, je nepravděpodobné, že by úspora byla způsobena školením. Více informací o psaní a zpětné vazbě, která se vztahuje k úkolu, naleznete v našem průvodci navrhování interaktivních postupů s užitečnou zpětnou vazbou.
3. Propojte důkazy o úkolu s provozními daty
Nyní umístěte důkazy o úkolu vedle provozních dat. Pro každé měření zaznamenejte čtyři věci: populaci (kdo je zahrnut), jmenovatel (na nárok, na zaměstnance nebo na měsíc), období a zdroj.
Mezi běžná měřítka v projektech administrativního zlepšení patří míra přepracování, podíl zamítnutých reklamací z důvodů, kterým lze předejít, doba potřebná k dokončení úkolu a náklady na transakci. Každou změnu převeďte na peníze pouze s jednotkovou cenou schválenou vaším finančním partnerem. Poté uveďte důležitou částku:
- Odhadovaný přínos: změna míry vynásobená dohodnutými jednotkovými náklady.
- Podíl připisovaný školení: odůvodněné procento, nikoli odhad, s písemným zdůvodněním.
- Čistý odhad: připsaný přínos mínus náklady na školení a projekt, které jste se rozhodli zahrnout.
Pravděpodobné propojení považujte za pravděpodobné propojení. Pokles v přepracování po tréninku je v souladu s fungováním tréninku. Nedokazuje to, že to tak bylo.
4. Zvažte alternativní vysvětlení
Zjistěte, co se během srovnávacího období ještě změnilo. Pomůže vám krátký kontrolní seznam:
- Pracovní zátěž. Vzrostly nebo klesly objemy? Klidnější čtvrtletí často znamená méně chyb.
- Personální obsazení. Odešli zkušení lidé, nebo přišli noví, kteří nikdy neprošli školením?
- Směs zákazníků nebo plátců. Změnily se typy nároků?
- Změny procesů nebo systémů. Změnilo se zároveň i něco dalšího v pracovním postupu?
Kdekoli je to možné, použijte srovnání. srovnatelné srovnání zaměřuje se na podobný tým, který dosud neabsolvoval školení. A postupné zavádění vám toto srovnání dává téměř zdarma: týmy proškolené později fungují jako kontrola pro týmy proškolené jako první. Ani jedno není vždy možné v nemocnici, kde každý tým může potřebovat změnu najednou, a v takovém případě upřímně hlásíte nižší úroveň spolehlivosti.
V tomto ohledu je užitečná studie z roku 2022, která se zabývá návratností rozsáhlého zlepšování kvality zdravotní péče, publikovaná v časopise BMC Health Services Research. Autoři definují návratnost obecně jako jakoukoli peněžní nebo nepeněžní hodnotu odvozenou ze zlepšení kvality a poukazují na to, že výsledky jsou vzájemně propojeny a je obtížné je pozorovat. Navrhují spíše posuzovat přínos k výsledkům než tvrdit, že je přímo připisována, a tradiční návratnost investic nazývají „distálním a neúplným ukazatelem hodnoty QI“ (Thusini a kol., Výzkum zdravotnických služeb BMC, 2022To se hodí i pro administrativní projekty. Uveďte důkazy o přínosu a důvěru, kterou v něj máte, ne jediné číslo s falešnou přesností.
5. Nahlásit výsledky a zvolit další akci
Zpráva, o které může finanční výbor jednat, se vejde na jednu stránku. Toto vzorové rozvržení ponechává pole s výsledky záměrně prázdná. Vyplňte je vlastními daty, nikdy ne vypůjčenými velikostmi efektů.
| Pole | Co nahrávat | Výsledek |
|---|---|---|
| Intervence a role | Program, projekt a kdo se ho zúčastnil | |
| Počet obyvatel a období | Kdo je zahrnut, od kdy do kdy | |
| Skóre základních a následných úkolů | Stejná kritéria, různé případy | |
| Operační míra a jmenovatel | Například míra přepracování na 100 reklamací | |
| Odhadovaný přínos | Změna vynásobená schválenými jednotkovými náklady | |
| Podíl připisovaný školení a proč | Použité zdůvodnění, srovnání | |
| Dodací a provozní náklady | Uvedeno samostatně | |
| Čistý odhad a spolehlivost | Vysoká, střední nebo nízká, s uvedením důvodu | |
| Další změny v daném období | Pracovní zátěž, personální obsazení, mix, proces | |
| Doporučené akce | Škálovat, revidovat nebo zastavit |
Předem se rozhodněte, co by ospravedlnilo každou akci. Program můžete škálovat, když se skóre úkolů zlepší u neviditelných případů, provozní ukazatele se posunou očekávaným směrem, budou ověřena další vysvětlení a čistý odhad zůstane pozitivní na základě opatrných předpokladů. Můžete jej revidovat, když se skóre úkolů zlepší, ale provozní ukazatele nikoli, což naznačuje omezení mimo školení. Můžete jej zastavit, když se ani jedno z nich nezmění. Dohodněte se na těchto pravidlech se svým sponzorem ještě předtím, než uvidíte čísla, aby výsledek nerozhodoval o kritériích.
Pracujte na realistickém příkladu
Ilustrativní příklad. Finanční partner a vedoucí informatiky nebo oddělení dodržování předpisů by měli před použitím ověřit případ a kritéria pro odpovědi.
Pouzdro. Tým přepracovává pracovní postup pro reklamace, přičemž se mění i personální obsazení a objemy. Počet opravných prací se během šesti měsíců po zaškolení snížil. Ve stejném období odešli dva zkušení kodéři a objem ve druhém čtvrtletí mírně klesl.
Úkol. Student odhadne úspory, které lze v rámci školení rozumně očekávat, vysvětlí své rozhodnutí, uvede důkazy a pojmenuje chybějící informace.
První pokus. „Přepracování selhalo, takže školení ušetřilo celý rozdíl. Vynásobil jsem pokles našimi náklady na přepracování a to jsem vykázal jako návratnost investic.“ Tím se školení připisuje vše a ostatní změny se ignorují.
Zpětná vazba a opakování. Kouč se ptá, co se dalšího změnilo, zda se liší vyškolený a nevyškolený personál a odkud pocházejí jednotkové náklady. Student je požádán, aby si rozdělil přínos.
Silnější pokus. „Objem přepracování poklesl, ale odešli dva zkušení kodéři a objem se snížil, takže to nemohu všechno připsat školení. Skóre úkolů u neviditelných případů se zvýšilo, což podporuje příspěvek školení. Uvedl bych pozorovanou úsporu, snížený podíl, který mohu odůvodnit, a nízké až střední hodnocení spolehlivosti. Pro zvýšení spolehlivosti potřebuji přepracování vyškolenými i neškolenými pracovníky a jednotkové náklady z hlediska financování.“ Toto odděluje pozorované úspory od způsobených úspor a říká, jaké důkazy chybí.
Zhodnoťte schopnosti pomocí jednoduchého kritéria
Ohodnoťte každé kritérium od 0 do 2:
| Kritérium | Pozorovatelné důkazy |
|---|---|
| Provádění úkolů | Měří náklady a přínosy projektu spojeného se školením a zaznamenává důkazy podporující jednotlivé údaje. |
| Uvažování | Vysvětluje omezení, alternativy a nejistotu a kontroluje odhady čistých nákladů a důvěryhodnost atribuce. |
| Hranice | Používá schválené postupy a vyhledá pomoc, pokud informace nebo autorita nejsou dostatečné. |
Kotvy: 0 chybí nebo není podloženo, 1 je částečné s relevantními opomenutími a 2 je úplné a odůvodněné podle dohodnutých kritérií. Kritické chyby definujte samostatně, například připsání celé změny školení bez kontroly jiných příčin, aby celkové skóre nemohlo žádnou z nich skrýt. Tato rubrika je návrhem, nikoli validovaným standardem připravenosti: upravte ji s praktikem a otestujte ji. Chcete-li každou aktivitu přizpůsobit myšlení, které vyžaduje, podívejte se na našeho průvodce přiřazování vzdělávacích aktivit k Bloomově taxonomii.
Kde pomáhá interaktivní výuka
Interaktivní formáty pomáhají s tím, kde by se lidé měli zavázat, než uslyší odpověď. V živém setkání může facilitátor ukázat případovou studii, požádat každou osobu, aby zadala podíl úspor, který by připsala školení, a poté ukázat rozpětí, než probere, proč se odhady liší. Stejný případ může probíhat vlastním tempem pro přípravu. AhaSlides podporuje interaktivní učení a přepínání mezi živým a vlastním tempem. Zkontrolujte všechny konkrétní funkce pro tvorbu, zpětnou vazbu nebo reporting, na které se chcete spolehnout, oproti svému vlastnímu pracovnímu postupu a zacházejte s umělou inteligencí, simulátory a systémovými integracemi jako s externími nebo nepotvrzenými, dokud je neuvidíte fungovat. Pokyny k výběru formátů naleznete v našem článku o Kdy použít adaptivní, interaktivní a živé učení.
Omezení, která mohou přetrvávat
- Přidělení. Bez srovnávací skupiny můžete odhadnout příspěvek, nikoli dokázat příčinu.
- Časová prodleva. Některé úspory se objeví až po uplynutí krátkého časového horizontu.
- Kvalita dat. Provozní data mohou být neúplná nebo se jejich definice mohou v polovině období změnit.
- Jiné změny. Pravidla pro personální obsazení, objem práce a platební režim mohou potlačit malý efekt školení.
- Převod. Výkon v tréninkovém projektu není totéž jako výkon pod každodenním tlakem.
Jmenujte je sponzorům včas. Školení zlepšuje to, co lidé dokážou. Nemění podmínky kolem práce.
Často kladené otázky
Co je návratnost investic (ROI) do školení pro zlepšování kvality?
Porovnává přínosy projektu zlepšování spojeného se školením s jeho náklady, obvykle jako čisté přínosy dělené náklady. Klíčovým krokem je zjistit, jak velkou část přínosu si školení může spravedlivě nárokovat.
Můžete prokázat, že úspory způsobilo školení?
Zřídka. Srovnání nebo postupné zavádění poskytuje silnější důkazy, ale ve většině nemocničních prostředí se uvádí spíše oprávněný příspěvek a míra spolehlivosti než důkaz.
Měly by se náklady na dopravu a provozní náklady započítávat dohromady?
Uveďte je odděleně. Náklady na dodání popisují samotné školení. Provozní náklady popisují širší projekt zlepšování. Uveďte, jakou celkovou částku vaše návratnost investic využívá.
Je průzkum spokojenosti důkazem úspor?
Ne. Spokojenost a dokončení jsou ukazateli plnění. Úspory potřebují důkazy o úkolech a provozní data.
Kde začít
Vyberte si jeden projekt na zlepšení, který již má výchozí bod. Napište rozhodnutí, které musí analýza podpořit, uveďte náklady, které zahrnete, vyberte jedno provozní opatření i s jeho jmenovatelem a nechte si od finančního partnera schválit jednotkové náklady. Vypracujte jednostránkovou zprávu s prázdnými poli pro výsledky a před doručením dat se dohodněte na pravidlech pro škálování, revizi nebo zastavení.
Chcete-li vidět, jak by takový případ mohl běžet živě s vaším vlastním týmem a následně být znovu použit vlastním tempem, prozkoumejte AhaSlides.
