Egy hitelkockázati modell három éve jól viselkedik. A visszatesztelése tiszta, a kimenetei kényelmesen a tűréshatáron belül vannak, és a vállalat megbízik benne. Egy oktatólaboratóriumban egy elemző egy jóváhagyott bemeneti feltételezést, egy hitelosztály várható megtérülési rátáját, egy kevésbé kényelmes értékre módosít. A fő kimenet alig változik. Két szegmens nagyon sokat változik. Az elemzőnek el kell döntenie, hogy ez mit jelent, mit mondjon a modell tulajdonosának, és mire ne használja a modellt.
Ez egy szemléltető forgatókönyv, nem pedig egy dokumentált ügyféleset. Bemutatja azokat a készségeket, amelyeket a modellkockázati képzési gyakorlatoknak kell fejleszteniük: a feltételezések tesztelése, a korlátok magyarázata és a döntések indoklása, amikor a modell stabilnak tűnik. Ez az útmutató a kockázati képzések vezetőinek, valamint a válaszokért felelős megfelelőségi és modellkockázati vezetőknek szól. Csak a képzés tervezését tárgyalja. A képzési gyakorlat nem validál egy élő pénzügyi modellt, és a modellkockázati szakembernek minden esetet használat előtt felül kell vizsgálnia.
Mik azok a modellkockázati tréninggyakorlatok?
A modellkockázati képzési gyakorlatok strukturált gyakorlófeladatok, amelyek során az elemzők egy modellt – általában egy egyszerűsített vagy szintetikus modellt – vizsgálnak a feltételezések és a bemeneti adatok változtatásával, majd értelmezik a történteket, és elmagyarázzák a modell által támogatott korlátokat. A stressztesztelő laboratórium ennek a gyakorlati formája: egy biztonságos modell, egy sor jóváhagyott változtatás és a következtetések indoklásának követelménye.
Gyors tények
| Kérdés | Rövid válasz |
|---|---|
| Mi a feladat? | Teszteld a feltételezéseket és magyarázd el a modell korlátait. |
| Mit érsz el? | A stressztesztek minősége és a kudarcok értelmezése. |
| A laboratórium validál egy élő modellt? | Nem. Egy biztonságos vagy szintetikus modellen tanít egy módszert. |
| Ki hagyja jóvá az ügyet? | Egy modellkockázat-szakértő, nem a tréner. |
| Élőben vagy saját tempóban? | Saját tempóban haladva a koncepciók és eszközök terén, élőben vagy moderálva az értelmezésben. |
| Mit nem old meg a tréning? | Gyenge kormányzás, nincs idő a kihívásokra és nem egyértelmű a felelősségi kör. |
| Honnan tudod, hogy működött? | Egy új modelleset vagy felügyelt felülvizsgálat egy hiányosságot követően, a rubrika alapján pontozva. |
1. Írd le a teljesítményproblémát
Kezdjük a döntéssel. Mit kell tennie egy elemzőnek, ha egy modell megfelelőnek tűnik? Írja le egyetlen igevezérelt mondatként: „Változtasson meg egy jóváhagyott feltételezést, figyelje meg, mi változik, magyarázza el az általa feltárt korlátozást, és mondja el, hogy mire szabad és mire nem szabad használni a modellt.”
A felügyelők nevezik meg ezt a készséget. Az Egyesült Államok Szövetségi Tartalékrendszere és a Valutaellenőrző Hivatal kiadott SR 11-7, Felügyeleti útmutató a modellkockázat-kezeléshez, 2011. április 4-én. A modellkockázatot a helytelen vagy helytelenül felhasznált modellkimeneteken alapuló döntésekből eredő kedvezőtlen következmények lehetőségeként írja le, és a „hatékony kihívást” vezérelvnek nevezi: objektív, tájékozott felek által végzett kritikai elemzés, akik képesek azonosítani a modell korlátait és feltételezéseit, és megfelelő változtatásokat végezni. Ez amerikai iránymutatás, nem minden joghatóságra vonatkozó szabály, ezért ellenőrizze az Önre vonatkozó követelményeket. Ez a képzés által felépítendő teljesítmény részletes leírása.
2. A tanulási és kontextuális hiányosságok diagnosztizálása
Hasonlítsa össze a szerepkör követelményeit a jelenlegi képzési gyakorlataival és értékeléseivel.
- Mit gyakorolnak manapság az elemzők? Ha a képzés egy előadás a modellirányításról plusz egy dokumentációs ellenőrzőlista, akkor elsajátították a szókincset. Nem gyakorolták a modell szándékos feltörését.
- Mi a kognitív igény? Bloom átdolgozott taxonómiájában a teszt futtatása alkalmazás, a modell kudarcának okainak értelmezése elemzés, a modell alkalmasságának megítélése értékelés, egy új stresszteszt megtervezése pedig alkotás. Útmutatónk a következőkhöz: tanulási tevékenységek illesztése Bloom taxonómiájához elmagyarázza, hogyan kell értelmezni ezeket a követeléseket.
- Vajon a képességen kívül valami más is közbeszól? Először is ellenőrizd a személyzetet, az eszközöket és az eljárásokat. Ha az elemzőknek nincs idejük a megkérdőjelezésre, nincs hozzáférésük a modell feltételezéseihez, vagy nincs módjuk korlátozások felvetésére, a laboratórium nem fogja megváltoztatni a hétfőn történteket.
- Üdvözlendő a kihívás? Ha egy modell kihívása a tulajdonos kritizálását jelenti, az emberek csendben maradnak. Mielőtt felkészülnél rá, egyeztess a kihívás fogadásáról.
3. Céltudatos felkészülés és gyakorlás megtervezése
Adj minden szakasznak saját feladatot.
Előkészítés: Ellenőrizze az előfeltételeket. Rövid, önállóan elvégezhető diagnosztika a modell céljáról, főbb bemeneteiről és a laboratórium által igényelt statisztikai elképzelésekről. Egy ilyen visszahívási ellenőrzés csak az előfeltételek teljesülését erősíti meg. Ne jelentse képességként.
Gyakorlat: modell stressztesztelő laboratóriumok. Készíts egy kisméretű, biztonságos modellt, vagy használj egy jóváhagyott szintetikust, és adj a tanulóknak egy listát a jóváhagyott változtatásokról. Három gyakorlat növekvő igény szerint:
- Változtass meg egy feltételezést. A tanuló egy jóváhagyott bemenetet mozgat, és rögzíti, hogy mely kimenetek mozdulnak el, mennyit és melyek nem.
- Keresd meg a megszakított szegmenst. A tanuló a címsor alatti szám alatt megkeresi, hol a legkevésbé stabil a modell, majd megmondja, mire nem használná.
- Tervezze meg a következő tesztet. A tanuló további stressztesztet javasol, megmondja, hogy milyen eredmény változtatná meg a nézetét, és mennyibe kerülne a lefuttatása.
A döntésekhez kapcsolódó visszajelzések. A „Jelentette a címsor változását, és nem ellenőrizte a két legnagyobb változást mutató szegmenst” válasz hasznosabb, mint egy pontszám. Nevezze meg a döntést, a felhasznált vagy elmulasztott bizonyítékot, valamint a jóváhagyott kritériumot.
Élő oktatói közreműködés vagy aszinkron értékelés? Az élő feldolgozás akkor ad a legtöbb értéket, ha egy modellkockázat-szakértő elmagyarázza, hogy miért fontos egy korlátozás, vagy miért volt gyenge egy teszt. Az aszinkron áttekintés elegendő a koncepciókhoz, a teszteredmények kulcshoz való viszonyításához, valamint az írásos korlátozási nyilatkozatokhoz, amelyeket a szakember később elolvashat. Gyakori kombináció az önálló ütemű felkészülés, a moderált laborgyakorlat, majd egy tapasztaltabb kolléga által felügyelt valós modellkihívás.
4. Dolgozz ki egy valós példát
Szemléltető példa. Egy modellkockázat-specialistának használat előtt validálnia kell az esetet és a válaszkritériumokat.
Az eset. Egy egyszerűsített hitelveszteség-modell 60 százalékos várható megtérülési rátát használ. A visszatesztelés hibátlan. A jóváhagyott stressz a fedezetlen hitelek esetében 40 százalékra módosítja a rátát. A portfólióveszteség becslése összességében 4 százalékkal emelkedik. Két szegmens, mindkettő kisvállalkozási fedezetlen, több mint 30 százalékkal emelkedik.
A feladat. A tanuló elmondja, mit mutat a teszt, elmagyarázza a korlátozást, és döntést javasol.
Első próbálkozás. „Az összváltozás mindössze 4 százalék, tehát a modell robusztus erre a feltételezésre.”
Visszajelzés és újrapróbálás. A facilitátor megkérdezi, hogy mely szegmensek mozdultak el a legtöbbet, mekkora részét képezik a portfóliónak, és mit rejt az összesített adat. Az újrapróbálkozás során a résztvevők az értelmezésre, a korlátozásra és az ajánlásra kérdeznek rá.
Egy erősebb próbálkozás. „A fő adat keveset változik, mivel az érintett szegmensek a portfólió kis részét teszik ki. Ezeken belül a becslés több mint 30 százalékkal emelkedik, így a modell rendkívül érzékeny a kisvállalkozások fedezetlen hiteleinek megtérülési feltételezésére. Nem támaszkodnék egyetlen 60 százalékos adatra ezeknél a szegmenseknél. Szegmens szintű megtérülési feltételezéseket és egy dokumentált érzékenységi tartományt javasolnék, és a modell tulajdonosának azt mondanám, hogy csak egy bemenetet teszteltem. Nem teszteltem korrelációt vagy adatminőséget.”
Miért védhető vagy hiányos az egyes válaszok? Mindegyiket a jóváhagyott kritériumok alapján ítéld meg, ne a facilitátor preferenciája alapján. Az első próbálkozás során az összesített adatokat olvasd le, majd megállj. Az erősebb próbálkozás során megkeresed a modell érzékeny pontjait, meghatározol egy felhasználáshoz kapcsolódó korlátozást, korlátozott műveletet javasolsz, és meghatározod, hogy mi marad még teszteletlen. Nem állítod, hogy a modell hibás.
5. Képességfelmérés és a terv átadása
A képesség bizonyítéka egy új, a tanuló által még nem látott modellesetre adott válasz. Pontozzon egy rövid, 0-tól 2-ig terjedő rubrikát kritériumonként, amelyet a szakemberrel közösen határoznak meg. Útmutatónk a következőkhöz: ítélőképesség és problémamegoldás értékelése a képzésben horgonyokat és kalibráló értékelőket foglal magában.
| Kritérium | Megfigyelhető bizonyítékok |
|---|---|
| Feladat végrehajtása | Jóváhagyott stresszteszteket futtat, és rögzíti a tevékenységet, valamint a mögötte álló bizonyítékokat. |
| Érvelés | Elmagyarázza, mi vallott kudarcot, milyen korlátokat mutatott, és mi volt a teszteletlen, beleértve a kudarc értelmezését is. |
| Határok | Jóváhagyott eljárásokat alkalmaz, és segítséget kér, ha hiányzik az információ vagy a hatáskör. |
Horgonyok: 0 jelentése hiányzik vagy nem támogatott, 1 jelentése részleges, releváns hiányosságokkal, és 2 jelentése teljes és a megállapodás szerinti kritériumok alapján indokolt. A kritikus hibákat külön kell definiálni, például egy stresszteszt eredményét egy élő modell validációjaként kell bemutatni, hogy egy jó összpontszám ne rejtsen el egyet. Ez a rubrika egy javasolt kiindulópont, nem pedig egy validált készültségi szabvány.
Munkahelyi utánkövetés. Megfelelő időszak elteltével adjon meg egy új modellesetet, vagy tekintsen át egy felügyelt kihívást egy élő modellen, és hasonlítsa össze az alapértékkel ugyanazon két mérőszám alapján: a stressztesztek minősége és a hibák értelmezése. Előre határozza meg a populációt, a nevezőt és az időzítést, és rögzítse, hogy mely eseteket látták az emberek a képzés során, hogy meg tudja különböztetni a visszahívást az áthelyezéstől.
Milyen bizonyítékok támasztanák alá a képzés hatékonyságát?
Keressen olyan elemzőket, akik egy általuk még nem látott modellen szándékosan megváltoztatnak egy feltételezést, a címsor alá néznek, egy felhasználáshoz kapcsolódó korlátozást állapítanak meg, és megmondják, mit nem teszteltek. Tegye hozzá, amit a kihívásokra vonatkozó jegyzeteik áttekintése mutat: konkrét korlátozásokat az általános kikötések helyett.
Legyen óvatos az olyan eredményekkel, mint például a megállapítások száma. Egy új modellleltár, egy hatósági vizsgálat vagy a munka felülvizsgálatának személyében bekövetkezett változás ugyanabban az időszakban is elmozdíthatja a megállapításokat. Több megállapítás élesebb kihívást vagy megváltozott küszöbértéket jelenthet, ezért a képzés beszámítása előtt ellenőrizze.
Ahol az interaktív közvetítés segít
Az interaktív formátumok segítenek, ahol mindenkinek el kell köteleznie magát egy előrejelzés mellett, mielőtt a csoport látná az eredményt. Egy élő ülésen a facilitátor leírhatja a változást, megkérheti az egyes elemzőket, hogy jósolják meg, mely kimenetek fognak változni, majd felfedheti az eredményt, ami rávilágít arra, hogy az intuíció és a modell mennyire tér el egymástól. Ugyanezek az esetek önálló tempóban is elvégezhetők a felkészülés részeként. AhaSlides támogatja az interaktív tanulást és az élő, valamint az önálló tempójú oktatás közötti váltást. Ellenőrizd a saját munkafolyamatodban használni kívánt szerzői, visszajelzési vagy jelentéskészítési funkciókat. A szimulátorokat, a virtuális valóságot, a mesterséges intelligenciát és a rendszerintegrációkat külső vagy nem megerősítettként kezeld, amíg nem láttad őket működni. Egy biztonságos modellen végzett labor gyakorlat, nem helyettesíti az élő modell validálását.
Amit a tréning nem old meg
- Gyenge kormányzás. Ha senki sem felelős a kihívás folytatásáért, a megállapítások érvényüket vesztik. Először egyeztess a tulajdonosokkal.
- Nincs idő kihívásra. Azok az emberek, akiket az áteresztőképességük alapján mérnek, nem fognak plusz teszteket futtatni.
- Zárt modellek. Ha az elemzők nem látják a feltételezéseket, akkor nem tudják azokat tesztelni sem.
- Bizonyítéki korlátok. Egy esetkészleten elért pontszám nem ír le minden kihívást, amellyel egy elemző szembesül, és egyetlen képzési gyakorlat sem validál egy élő pénzügyi modellt.
Nevezd meg ezeket a szponzoroknak időben, és egyeztessétek meg, hogy ki javítja meg mindegyiket.
Gyakran Ismételt Kérdések
Mik azok a modellkockázati tréninggyakorlatok?
Gyakoroljon olyan feladatokat, ahol az elemzők megváltoztatják a feltételezéseket egy biztonságos modellben, értelmezzék a változásokat, és magyarázzák el a modell korlátait és megfelelő felhasználási módjait.
Egy oktatólabor validálhat egy élő modellt?
Nem. A laboratórium egy biztonságos vagy szintetikus modellen tanít egy módszert. Az élő modell validálása a saját irányítási rendszered és a vonatkozó útmutatók szerint történik.
Szükségesek-e az elemzőknek kódolniuk ezeknek a laboroknak a működtetéséhez?
Nem feltétlenül. Egy táblázatkezelő modell vagy egy jóváhagyott eszköz, amelyen a hangsúlyváltozások menüje is elérhető, elegendő. A tanított készség az értelmezés, nem a programozás.
Hogyan értékeled reálisan a kihívást jelentő készségeket?
Használjon új esetet, egy rövid rubrikát és egyeztetett horgonypontokat, és kérjen meg egy modellkockázati szakértőt a pontozás kalibrálására.
Hol kezdjem
Kérj meg egy modellkockázati szakértőt egy kis, biztonságos modellről és három jóváhagyott feltételezésmódosításról. Készíts vázlatot a háromkritériumú értékelőlapról, futtasd le az „egy feltételezés módosítása” gyakorlatot egy csapattal, majd pontozz egy új esetet, mielőtt bevezetnéd.
Ha szeretné megtudni, hogyan futtatható egy ehhez hasonló „előrejelzés, majd feltárás” típusú laboratórium élőben, és hogyan használható utána önálló ütemben, fedezze fel a következő lehetőségeket: AhaSlides.
