Model úvěrového rizika se choval dobře po dobu tří let. Jeho zpětné testování je čisté, jeho výstupy se pohodlně nacházejí v rámci tolerance a firma mu důvěřuje. V tréninkové laboratoři analytik změní jeden schválený vstupní předpoklad, očekávanou míru návratnosti u určité třídy úvěrů, na méně pohodlnou hodnotu. Celkový výstup se sotva mění. Dva segmenty se mění hodně. Analytik se musí rozhodnout, co to znamená, co sdělit vlastníkovi modelu a k čemu by se model neměl používat.
Toto je ilustrativní scénář, nikoli zdokumentovaný případ zákazníka. Ukazuje dovednosti, které je třeba vybudovat pomocí tréninkových cvičení pro modelové riziko: testování předpokladů, vysvětlování omezení a zdůvodňování rozhodnutí, když se model jeví jako stabilní. Tato příručka je určena pro vedoucí školení v oblasti rizik a pro vedoucí oddělení compliance a modelových rizik, kteří zná odpovědi. Zahrnuje pouze návrh školení. Tréninkové cvičení neověřuje platný finanční model a specialista na modelová rizika by měl před použitím každý případ zkontrolovat.
Co jsou to cvičení pro trénink modelového rizika?
Trénink modelového rizika je strukturovaný praktický úkol, ve kterém analytici zkoumají model, obvykle zjednodušený nebo syntetický, změnou předpokladů a vstupů, poté interpretují, co se děje, a vysvětlují limity toho, co model dokáže podporovat. Laboratoř pro zátěžové testování je praktickou formou tohoto postupu: bezpečný model, sada schválených změn a požadavek na odůvodnění závěrů.
Rychlá fakta
| Otázka | Stručná odpověď |
|---|---|
| Jaký je úkol? | Otestujte předpoklady a vysvětlete omezení modelu. |
| Jaké skóre dosáhnete? | Kvalita zátěžových testů a interpretace toho, co selhalo. |
| Validuje laboratoř živý model? | Ne. Učí metodu na bezpečném nebo syntetickém modelu. |
| Kdo případ schválí? | Specialista na modelová rizika, ne školitel. |
| Živě nebo vlastním tempem? | Vlastní tempo pro koncepty a nástroje, výklad naživo nebo s vedením. |
| Co trénink nemůže vyřešit? | Slabá správa, nedostatek času na zpochybňování a nejasné vlastnictví. |
| Jak víš, že to fungovalo? | Nový modelový případ nebo kontrolovaná revize po mezerě, hodnocená podle rubriky. |
1. Popište problém s výkonem
Začněte s rozhodnutím. Co musí analytik udělat, když model vypadá dobře? Napište to jako jednu větu řízenou slovesem: „Změňte schválený předpoklad, pozorujte, co se mění, vysvětlete omezení, která to odhaluje, a řekněte, k čemu by se model měl a neměl používat.“
Supervizoři tuto dovednost pojmenovávají. Americký Federální rezervní systém a Úřad kontrolora měny vydaly SR 11-7, Pokyny dohledu k řízení modelových rizik, dne 4. dubna 2011. Popisuje modelové riziko jako potenciál nepříznivých důsledků rozhodnutí založených na nesprávných nebo zneužitých výstupech modelu a za hlavní princip označuje „efektivní zpochybnění“: kritickou analýzu objektivními, informovanými stranami, které dokáží identifikovat omezení a předpoklady modelu a provést vhodné změny. Toto je doporučení USA, nikoli pravidlo pro každou jurisdikci, proto si ověřte požadavky, které se na vás vztahují. Jedná se o podrobný popis výkonu, který by mělo školení vybudovat.
2. Diagnostikovat mezery ve vzdělávání a kontextu
Porovnejte požadavky dané role s tím, co vaše současné školení zahrnuje a hodnotí.
- Co analytici praktikují nyní? Pokud je školení formou přednášky o správě modelů a kontrolního seznamu dokumentace, pak si studenti osvojili danou slovní zásobu. Necvičili si úmyslné narušení modelu.
- Jaká je kognitivní poptávka? V Bloomově revidované taxonomii je spuštění testu aplikací, interpretace selhání modelu analýzou, posouzení vhodnosti modelu pro dané použití hodnocením a návrh nového zátěžového testu tvorbou. Náš průvodce přiřazování vzdělávacích aktivit k Bloomově taxonomii vysvětluje, jak tyto požadavky číst.
- Stojí v cestě něco jiného než dovednost? Nejprve zkontrolujte personální obsazení, nástroje a postupy. Pokud analytici nemají čas na zpochybnění, nemají přístup k předpokladům modelu nebo nemají způsob, jak nastolit omezení, laboratoř v pondělí nic nezmění.
- Je výzva vítána? Pokud vyzvat model znamená kritizovat jeho majitele, lidé budou mlčet. Dohodněte se, jak bude výzva přijata, než na ni začnete trénovat.
3. Navrhněte cílenou přípravu a praxi
Dejte každé fázi vlastní úkol.
Příprava: zkontrolujte si předpoklady. Krátká diagnostická analýza účelu modelu, jeho hlavních vstupů a statistických poznatků, které laboratoř potřebuje, dle vlastního tempa. Takováto kontrola potvrzuje pouze předpoklady. Neuvádějte ji jako způsobilost.
Cvičení: modelové laboratoře pro zátěžové testování. Vytvořte malý, bezpečný model nebo použijte schválený syntetický model a nabídněte studentům seznam schválených změn. Tři cvičení seřazená podle rostoucí náročnosti:
- Změňte jeden předpoklad. Student posune jeden schválený vstup a zaznamenává, které výstupy se posunou, o kolik a které ne.
- Najděte úsečku, kterou zlomí. Student se podívá pod úvodní číslo a najde, kde je model nejméně stabilní, a poté uvede, k čemu by ho nepoužil.
- Navrhněte další test. Student navrhne další zátěžový test, řekne, jaký výsledek by změnil jeho názor a kolik by jeho provedení stálo.
Zpětná vazba spojená s rozhodnutími. „Nahlásili jste změnu titulku a nezkontrolovali jste dva segmenty, které se nejvíce posunuly“ je užitečnější než skóre. Uveďte rozhodnutí, použité nebo přehlédnuté důkazy a schválené kritérium.
Živý vstup instruktora nebo asynchronní kontrola? Živý vstup přidává největší hodnotu, když specialista na modelová rizika vysvětlí, proč je na určitém omezení důležité nebo proč byl test slabý. Asynchronní kontrola je dostatečná pro koncepty, pro porovnání výsledků testů s klíčem a pro písemná prohlášení o omezeních, která si specialista může přečíst později. Běžnou kombinací je příprava vlastním tempem, facilitovaná laboratorní cvičení a následná kontrola reálného modelu pod dohledem zkušenějšího kolegy.
4. Vypracujte realistický příklad
Ilustrativní příklad. Specialista na modelová rizika by měl před použitím ověřit případ a zodpovědět kritéria.
Pouzdro. Zjednodušený model ztrát z úvěrů používá očekávanou míru návratnosti 60 procent. Zpětné testování je v pořádku. Schválený stresový model mění míru na 40 procent u nezajištěných úvěrů. Odhad ztráty portfolia se celkově zvyšuje o 4 procenta. Dva segmenty, oba nezajištěné pro malé podniky, dosahují nárůstu o více než 30 procent.
Úkol. Student uvádí, co test ukazuje, vysvětluje omezení a doporučuje rozhodnutí.
První pokus. „Celková změna je pouze 4 procenta, takže model je vůči tomuto předpokladu robustní.“
Zpětná vazba a opakování. Facilitátor se ptá, které segmenty se nejvíce pohnuly, jak velké jsou v portfoliu a co se skrývá za celkovým číslem. Opakovaný pokus se ptá na interpretaci, omezení a doporučení.
Silnější pokus. „Hlavní údaj se mění jen málo, protože postižené segmenty tvoří malý podíl portfolia. V rámci nich se odhad zvyšuje o více než 30 procent, takže model je vysoce citlivý na předpoklad zotavení u nezajištěných úvěrů pro malé podniky. Nespoléhal bych se na jediný údaj 60 procent pro tyto segmenty. Doporučil bych předpoklady zotavení na úrovni segmentů a zdokumentovaný rozsah citlivosti a vlastníkovi modelu bych řekl, že jsem testoval pouze jeden vstup. Netestoval jsem korelaci ani kvalitu dat.“
Proč je každá odpověď obhajitelná nebo neúplná. Každý model posuďte podle schválených kritérií, nikoli podle preferencí facilitátora. První pokus přečte agregát a zastaví se. Silnější pokus zjistí, kde je model citlivý, uvede omezení vázané na použití, doporučí omezenou akci a řekne, co zůstalo neotestováno. Netvrdí, že model je chybný.
5. Posouzení kapacit a plánování přenosu
Důkazem schopností je reakce na nový modelový případ, který student dosud neviděl. Každé kritérium ohodnoťte krátkým hodnocením od 0 do 2, které definujete se svým specialistou. Náš průvodce hodnocení úsudku a řešení problémů ve výcviku Zahrnuje kotvy a kalibrační hodnotitele.
| Kritérium | Pozorovatelné důkazy |
|---|---|
| Provádění úkolů | Provádí schválené zátěžové testy a zaznamenává provedené akce a důkazy, které za nimi stály. |
| Uvažování | Vysvětluje, co selhalo, jaká omezení to ukazuje a co nebylo otestováno, včetně interpretace selhání. |
| Hranice | Používá schválené postupy a vyhledá pomoc, když chybí informace nebo oprávnění. |
Kotvy: 0 znamená chybějící nebo nepodložené, 1 znamená částečné s relevantními opomenutími a 2 znamená úplné a odůvodněné podle dohodnutých kritérií. Kritické chyby definujte samostatně, například prezentujte výsledek zátěžového testu jako validaci živého modelu, aby dobré celkové skóre nemohlo zakrýt chybu. Tato rubrika je navrhovaným výchozím bodem, nikoli validovaným standardem připravenosti.
Sledování na pracovišti. Po uplynutí vhodné doby zadejte nový modelový případ nebo zkontrolujte kontrolovaný úkol na živém modelu a porovnejte jej s výchozím stavem na základě stejných dvou ukazatelů: kvality zátěžových testů a interpretace selhání. Předem definujte populaci, jmenovatele a načasování a zaznamenejte si, které případy lidé viděli během školení, abyste mohli rozlišit mezi vybavováním a přenosem.
Jaké důkazy by prokázaly, že školení fungovalo?
Hledejte analytiky, kteří na modelu, který neviděli, záměrně změní předpoklad, podívají se pod titulek, uvedou omezení vázané na použití a sdělí, co netestovali. Doplňte to, co ukazuje přezkum jejich poznámek k výzvám: specifická omezení spíše než obecná upozornění.
Buďte opatrní s výsledky, jako je počet zjištění. Nový inventář modelů, regulační přezkoumání nebo změna v tom, kdo práci posuzuje, by je mohly posunout ve stejném období. Více zjištění by mohlo znamenat ostřejší výzvu nebo změnu prahu, proto si to před uznáním školení ověřte.
Kde pomáhá interaktivní výuka
Interaktivní formáty pomáhají, když by se všichni měli zavázat k predikci dříve, než skupina uvidí výsledek. V živém setkání může facilitátor popsat změnu, požádat každého analytika, aby předpověděl, které výstupy se posunou, a poté odhalit výsledek, který odhalí, jak moc se intuice a model liší. Stejné případy lze v rámci přípravy provádět vlastním tempem. AhaSlides podporuje interaktivní učení a přepínání mezi živým a vlastním tempem výuky. Porovnejte všechny funkce pro tvorbu, zpětnou vazbu nebo reporting, na které se chcete spolehnout, s vaším vlastním pracovním postupem. Považujte simulátory, virtuální realitu, umělou inteligenci a systémové integrace za externí nebo nepotvrzené, dokud je nevidíte fungovat. Laboratoř na bezpečném modelu je praxe, nikoli náhrada za validaci živého modelu.
Co trénink neopraví
- Slabá správa věcí veřejných. Pokud nikdo nenese odpovědnost za následná opatření po výzvě, zjištění propadnou. Nejprve se dohodněte s vlastníky.
- Není čas na výzvy. Lidé, u kterých se měří propustnost, nebudou provádět další testy.
- Uzavřené modely. Pokud analytici nevidí předpoklady, nemohou je otestovat.
- Meze důkazů. Skóre na základě souboru případů nepopisuje každou výzvu, kterou analytik postaví, a žádné školení neověřuje reálný finanční model.
Včas je jmenujte sponzorům a dohodněte se, kdo je opraví.
Často kladené otázky
Co jsou to cvičení pro trénink modelového rizika?
Procvičte si úkoly, kde analytici mění předpoklady v bezpečném modelu, interpretují, co se mění, a vysvětlují omezení modelu a jeho vhodné využití.
Může školicí laboratoř ověřit živý model?
Ne. Laboratoř vyučuje metodu na bezpečném nebo syntetickém modelu. Validace živého modelu se řídí vašimi vlastními zásadami řízení a příslušnými pokyny.
Musí analytici umět programovat, aby mohli tyto laboratoře provozovat?
Ne nutně. Postačí tabulkový model nebo schválený nástroj s nabídkou změn napětí. Učí se interpretace, nikoli programování.
Jak spravedlivě hodnotíte dovednosti v oblasti řešení náročných úkolů?
Použijte nový případ, krátkou rubriku a dohodnuté kotvy a nechte specialistu na modelová rizika kalibrovat skóre.
Kde začít
Požádejte specialistu na modelová rizika o jeden malý, bezpečný model a tři schválené změny předpokladů. Vytvořte rubriku se třemi kritérii, proveďte cvičení „změny jednoho předpokladu“ s jedním týmem a poté před jeho spuštěním ohodnoťte nový případ.
Chcete-li vidět, jak by se laboratoř typu „predikce a následné odhalení“ mohla provozovat v reálném čase a následně znovu používat vlastním tempem, prozkoumejte AhaSlides.
