أظهر نموذج مخاطر الائتمان أداءً جيدًا على مدى ثلاث سنوات. وكانت نتائج اختباره الخلفي سليمة، ومخرجاته ضمن النطاق المقبول، وتثق به الشركة. في مختبر تدريبي، قام محلل بتغيير أحد افتراضات المدخلات المعتمدة، وهو معدل الاسترداد المتوقع لفئة من القروض، إلى قيمة أقل ملاءمة. بالكاد تغيرت النتيجة الرئيسية. بينما تغيرت جزأين بشكل ملحوظ. على المحلل أن يحدد دلالة ذلك، وما يجب إبلاغه لمالك النموذج، وما هي الاستخدامات غير المناسبة للنموذج.
هذا مثال توضيحي، وليس حالة عميل موثقة. يُظهر هذا المثال المهارات التي يجب أن تُنمّيها تمارين تدريب إدارة مخاطر النماذج: اختبار الافتراضات، وشرح القيود، وتبرير القرار عندما يبدو النموذج مستقرًا. هذا الدليل مُخصّص لرؤساء تدريب إدارة المخاطر، وقادة الامتثال وإدارة مخاطر النماذج الذين يملكون الإجابات. وهو يُغطي تصميم التدريب فقط. لا يُغني التمرين التدريبي عن التحقق من صحة نموذج مالي حقيقي، ويجب على أخصائي إدارة مخاطر النماذج مراجعة كل حالة قبل استخدامها.
ما هي تمارين التدريب على مخاطر النماذج؟
تُعدّ تمارين التدريب على إدارة مخاطر النماذج مهامًا عملية منظمة يقوم فيها المحللون بفحص نموذج، عادةً ما يكون نموذجًا مبسطًا أو اصطناعيًا، عن طريق تغيير الافتراضات والمدخلات، ثم تفسير النتائج وشرح حدود ما يمكن أن يدعمه النموذج. ويُعدّ مختبر اختبارات الضغط الشكل العملي لهذا التدريب: نموذج آمن، ومجموعة من التغييرات المعتمدة، وشرط تبرير الاستنتاجات.
حقائق سريعة
| سؤال | اجابة قصيرة |
|---|---|
| ما هي المهمة؟ | اختبر الافتراضات واشرح قيود النموذج. |
| ما هي نتيجتك؟ | جودة اختبارات الإجهاد وتفسير أسباب الفشل. |
| هل يقوم المختبر بالتحقق من صحة نموذج حي؟ | لا، إنه يعلم طريقة على نموذج آمن أو اصطناعي. |
| من يوافق على القضية؟ | أخصائي مخاطر النماذج، وليس المدرب. |
| مباشر أم بوتيرة ذاتية؟ | التعلم الذاتي للمفاهيم والأدوات، والتعلم المباشر أو الميسر للتفسير. |
| ما الذي لا يستطيع التدريب إصلاحه؟ | ضعف الحوكمة، وعدم وجود وقت للتحدي، وعدم وضوح الملكية. |
| كيف عرفت أنها نجحت؟ | حالة نموذجية جديدة أو مراجعة خاضعة للإشراف بعد فترة انقطاع، يتم تقييمها وفقًا للمعايير المحددة. |
1. صف مشكلة الأداء
ابدأ بالقرار. ما الذي يجب على المحلل فعله عندما يبدو النموذج جيدًا؟ اكتبه في جملة واحدة تبدأ بفعل: "غيّر افتراضًا مُعتمدًا، ولاحظ التغييرات، واشرح القيد الذي يكشفه هذا التغيير، وحدد استخدامات النموذج المُناسبة وغير المُناسبة."
يُطلق المشرفون على هذه المهارة اسم "المهارة". وقد أصدر كل من مجلس الاحتياطي الفيدرالي الأمريكي ومكتب مراقب العملة هذه المهارة. SR 11-7، إرشادات إشرافية بشأن إدارة مخاطر النماذجفي 4 أبريل 2011، تم إصدار توجيهات بشأن مخاطر النماذج في الولايات المتحدة الأمريكية. تُعرّف هذه التوجيهات مخاطر النماذج بأنها احتمالية حدوث عواقب سلبية نتيجة اتخاذ قرارات مبنية على مخرجات نماذج غير صحيحة أو مُساء استخدامها، وتُشير إلى "التحدي الفعال" كمبدأ توجيهي: وهو التحليل النقدي من قِبل جهات موضوعية ومُطّلعة قادرة على تحديد قيود النماذج وافتراضاتها وإجراء التعديلات المناسبة. هذه توجيهات أمريكية وليست قاعدة عامة في جميع الولايات القضائية، لذا يُرجى مراجعة المتطلبات التي تنطبق عليك. وهي وصف دقيق للأداء الذي ينبغي أن يُحسّنه التدريب.
2. تشخيص فجوات التعلم والسياق
قارن بين متطلبات الوظيفة وما تتضمنه ممارساتك التدريبية الحالية وما يتم تقييمه.
- ما هي الممارسات التي يتبعها المحللون الآن؟ إذا اقتصر التدريب على محاضرة حول إدارة النماذج بالإضافة إلى قائمة مراجعة للتوثيق، فقد تعلموا المصطلحات فقط. لم يتدربوا على تعطيل نموذج ما عمداً.
- ما هو المطلب المعرفي؟ في تصنيف بلوم المُعدَّل، يُعدّ إجراء الاختبار تطبيقًا، وتفسير سبب فشل النموذج تحليلًا، والحكم على مدى ملاءمة النموذج للاستخدام تقييمًا، وتصميم اختبار إجهاد جديد ابتكارًا. دليلنا لـ مطابقة أنشطة التعلم مع تصنيف بلوم يشرح كيفية قراءة هذه المطالب.
- هل هناك شيء آخر غير المهارة يعيق الأمر؟ تحقق أولاً من الموظفين والأدوات والإجراءات. إذا لم يكن لدى المحللين وقت للطعن، أو لم يكن لديهم إمكانية الوصول إلى افتراضات النموذج، أو لم يكن لديهم وسيلة لإثارة أي قيود، فلن يغير المختبر ما سيحدث يوم الاثنين.
- هل يُرحب بالتحديات؟ إذا كان تحدي نموذج ما يعني انتقاد صاحبه، فسيلتزم الناس الصمت. اتفقوا على كيفية استقبال التحدي قبل التدرب عليه.
3. تصميم إعداد وتدريب هادف
امنح كل مرحلة مهمتها الخاصة.
التحضير: تحقق من المتطلبات الأساسية. اختبار تشخيصي قصير ذاتي الوتيرة حول غرض النموذج، ومدخلاته الرئيسية، والأفكار الإحصائية التي يحتاجها المختبر. يؤكد هذا الاختبار المتطلبات الأساسية فقط، ولا يُدرج ضمن القدرات.
التدريب العملي: مختبرات اختبار الإجهاد النموذجية. قم ببناء نموذج صغير وآمن، أو استخدم نموذجًا اصطناعيًا معتمدًا، وقدم للمتعلمين قائمة بالتغييرات المعتمدة. ثلاثة تمارين مرتبة تصاعديًا حسب مستوى الصعوبة:
- غيّر أحد الافتراضات. يقوم المتعلم بتحريك مدخل واحد معتمد ويسجل أي المخرجات تتحرك، وبأي مقدار، وأيها لا تتحرك.
- حدد الجزء الذي ينقسم. ينظر المتعلم أسفل الرقم الرئيسي ويجد أين يكون النموذج أقل استقرارًا، ثم يحدد ما الذي لن يستخدمه من أجله.
- صمم الاختبار التالي. يقترح المتعلم إجراء اختبار إجهاد إضافي، ويذكر النتيجة التي من شأنها أن تغير وجهة نظره وما هي تكلفة إجرائه.
يتم ربط التغذية الراجعة بالقرارات. إنّ عبارة "لقد أبلغتَ عن تغيير العنوان ولم تُدقّق في الجزأين اللذين شهدا أكبر تغيير" أكثر فائدة من مجرد إعطاء درجة. اذكر القرار، والأدلة المستخدمة أو التي تمّ إغفالها، والمعيار المعتمد.
هل تفضلون تلقي ملاحظات مباشرة من المدرب أم مراجعة غير متزامنة؟ تُضيف المدخلات المباشرة قيمةً كبيرةً عندما يشرح أخصائي مخاطر النماذج سبب أهمية أحد القيود، أو سبب ضعف أحد الاختبارات. يكفي إجراء مراجعة غير متزامنة لفهم المفاهيم، وللتحقق من نتائج الاختبارات مقابل معيار مرجعي، وللحصول على بيانات مكتوبة حول القيود يمكن للأخصائي قراءتها لاحقًا. يتضمن المزيج الشائع التحضير الذاتي، وورشة عمل مُيسّرة، ثم تحدٍّ مُشرف عليه لنموذج حقيقي من قِبل زميل أكثر خبرة.
4. قم بدراسة مثال واقعي
توضيحي. يجب على أخصائي مخاطر النماذج التحقق من صحة الحالة والإجابة على المعايير قبل الاستخدام.
القضية. يستخدم نموذج مبسط لخسائر القروض معدل استرداد متوقعًا بنسبة 60%. وقد أثبتت الاختبارات السابقة سلامة النموذج. أما في حالة الضغط المعتمدة، فيُخفض المعدل إلى 40% للقروض غير المضمونة. ويرتفع تقدير خسائر المحفظة بنسبة 4% إجمالًا. كما يرتفع قطاعان، كلاهما مخصص للقروض غير المضمونة للشركات الصغيرة، بأكثر من 30%.
المهمة. يوضح المتعلم ما يظهره الاختبار، ويشرح القيود، ويوصي باتخاذ قرار.
محاولة أولى. "التغيير الإجمالي لا يتجاوز 4%، لذا فإن النموذج قوي في مواجهة هذا الافتراض."
تلقي الملاحظات وإعادة المحاولة. يسأل الميسر عن القطاعات التي شهدت أكبر قدر من التحرك، وحجمها في المحفظة، وما الذي يخفيه الرقم الإجمالي. ثم يطلب إعادة المحاولة التفسير والقيود والتوصية.
محاولة أقوى. "لا يتغير الرقم الرئيسي كثيرًا لأن القطاعات المتأثرة تشكل نسبة صغيرة من المحفظة. ضمن هذه القطاعات، يرتفع التقدير بأكثر من 30%، لذا فإن النموذج شديد الحساسية لفرضية التعافي لقروض الشركات الصغيرة غير المضمونة. لا أنصح بالاعتماد على نسبة 60% فقط لتلك القطاعات. أوصي بوضع فرضيات تعافي على مستوى القطاعات وتحديد نطاق حساسية موثق، وسأبلغ مالك النموذج أنني اختبرت مدخلًا واحدًا فقط. لم أختبر الارتباط أو جودة البيانات."
لماذا كل رد قابل للدفاع عنه أو غير مكتمل. قيّم كل حالة وفقًا للمعايير المعتمدة، وليس وفقًا لتفضيلات الميسّر. في المحاولة الأولى، تُقرأ النتائج الإجمالية ثم تتوقف. أما المحاولة الأقوى، فتحدد مواطن حساسية النموذج، وتُشير إلى قيد مرتبط باستخدام معين، وتُوصي بإجراء محدود، وتُبيّن ما لم يُختبر بعد. وهي لا تدّعي خطأ النموذج.
5. تقييم القدرات وتخطيط عملية النقل
يُعدّ إثبات الكفاءة استجابةً لحالة نموذجية جديدة لم يسبق للمتعلّم رؤيتها. قيّم كل معيار بتقييم قصير من 0 إلى 2، وفقًا لما يحدده المختص. دليلنا لـ تقييم الحكم وحل المشكلات في التدريب يشمل ذلك المرشدين ومقيّمي المعايرة.
| معيار | أدلة قابلة للملاحظة |
|---|---|
| تنفيذ المهمة | يقوم بإجراء اختبارات الإجهاد المعتمدة ويسجل الإجراء والأدلة التي تدعمه. |
| منطق | يشرح ما فشل، والقصور الذي يظهره، وما لم يتم اختباره، بما في ذلك تفسير الفشل. |
| الحدود | يستخدم الإجراءات المعتمدة ويطلب المساعدة عند غياب المعلومات أو السلطة. |
المعايير: 0 تعني غائبة أو غير مدعومة، 1 تعني جزئية مع وجود إغفالات ذات صلة، و2 تعني كاملة ومبررة وفقًا للمعايير المتفق عليها. عرّف الأخطاء الحرجة بشكل منفصل، على سبيل المثال، تقديم نتيجة اختبار إجهاد على أنها تحقق من صحة نموذج حي، بحيث لا يمكن للدرجة الإجمالية الجيدة إخفاء خطأ حرج. هذا المعيار هو نقطة انطلاق مقترحة، وليس معيارًا معتمدًا للجاهزية.
متابعة في مكان العمل. بعد فترة مناسبة، قدّم حالة نموذجية جديدة أو راجع تحديًا تحت الإشراف على نموذج حي، وقارنه بالأساس وفقًا للمعيارين نفسيهما: جودة اختبارات الإجهاد وتفسير الفشل. حدّد مسبقًا المجموعة المستهدفة، والمقام، والتوقيت، وسجّل الحالات التي شاهدها المتدربون خلال التدريب لتتمكن من التمييز بين التذكر والنقل.
ما الدليل الذي سيثبت نجاح التدريب؟
ابحث عن المحللين الذين يُغيّرون افتراضًا ما عمدًا في نموذج لم يسبق لهم الاطلاع عليه، وينظرون إلى ما وراء العنوان، ويذكرون قيدًا مرتبطًا بالاستخدام، ويوضحون ما لم يختبروه. أضف إلى ذلك ما تُظهره مراجعة ملاحظاتهم التحليلية: قيود محددة بدلًا من تحذيرات عامة.
توخَّ الحذر عند النظر في نتائج مثل عدد الملاحظات المُسجَّلة. فقد يؤدي جرد نموذج جديد، أو فحص تنظيمي، أو تغيير في الجهة المُراجعة للعمل إلى تغييرها خلال نفس الفترة. كما أن زيادة عدد الملاحظات قد تعني تحديًا أكبر أو تغييرًا في المعايير، لذا تحقق من ذلك قبل اعتماد التدريب.
حيث يساعد التوصيل التفاعلي
تُساعد الأساليب التفاعلية في ضمان التزام كل فرد بتوقعاته قبل أن ترى المجموعة النتيجة. في جلسة مباشرة، يُمكن للمُيسِّر وصف التغيير، ثم يطلب من كل مُحلِّل التنبؤ بالمخرجات التي ستتغير، ثم يكشف النتيجة، مما يُظهر مدى اختلاف الحدس عن النموذج. يُمكن إجراء نفس الحالات بوتيرة ذاتية كتحضير. AhaSlides يدعم التعلم التفاعلي والتنقل بين التدريب المباشر والتدريب الذاتي. تحقق من أي وظيفة تأليف أو ملاحظات أو تقارير تنوي الاعتماد عليها في سير عملك. تعامل مع المحاكيات والواقع الافتراضي والذكاء الاصطناعي وتكامل الأنظمة على أنها خارجية أو غير مؤكدة حتى ترى عملها. يُعدّ التدريب العملي على نموذج آمن بمثابة تدريب، وليس بديلاً عن التحقق من صحة النموذج الفعلي.
ما لا يُصلحه التدريب
- حوكمة ضعيفة. إذا لم يكن هناك من يتحمل مسؤولية متابعة التحدي، فإن النتائج ستفقد صلاحيتها. لذا، يجب الاتفاق على الجهات المسؤولة أولاً.
- لا وقت للتحدي. الأشخاص الذين يتم تقييمهم بناءً على الإنتاجية لن يقوموا بإجراء اختبارات إضافية.
- النماذج المغلقة. إذا لم يتمكن المحللون من رؤية الافتراضات، فلن يتمكنوا من اختبارها.
- حدود الأدلة. لا تصف النتيجة على مجموعة من الحالات كل تحدٍ سيواجهه المحلل، ولا يوجد تمرين تدريبي للتحقق من صحة نموذج مالي حي.
قم بتسمية هذه المشاكل للرعاة مبكراً واتفق على من سيتولى إصلاح كل منها.
الأسئلة المتكررة
ما هي تمارين التدريب على مخاطر النماذج؟
مهام تدريبية حيث يقوم المحللون بتغيير الافتراضات في نموذج آمن، وتفسير ما يتحرك وشرح قيود النموذج واستخداماته المناسبة.
هل يمكن لمختبر تدريبي التحقق من صحة نموذج حي؟
لا. يُدرّس المختبر طريقةً ما على نموذج آمن أو اصطناعي. أما التحقق من صحة النموذج الحي فيخضع لضوابطك الخاصة والإرشادات ذات الصلة.
هل يحتاج المحللون إلى كتابة برامج لتشغيل هذه المختبرات؟
ليس بالضرورة. يكفي نموذج جدول بيانات أو أداة معتمدة تتضمن قائمة بتغيرات الإجهاد. المهارة التي يتم تدريسها هي التفسير، وليست البرمجة.
كيف تقيّم مهارات التحدي بشكل عادل؟
استخدم حالة جديدة، ومعايير تقييم قصيرة، ونقاط مرجعية متفق عليها، واطلب من متخصص في مخاطر النماذج معايرة نظام التقييم.
من أين أبدا
اطلب من أخصائي إدارة مخاطر النماذج نموذجًا صغيرًا وآمنًا واحدًا وثلاثة تغييرات معتمدة على الافتراضات. صِغْ معيار التقييم الثلاثي، ونفّذ تمرين "تغيير افتراض واحد" مع فريق واحد، ثم قيّم الحالة الجديدة قبل تطبيقها.
للاطلاع على كيفية تشغيل مختبر التنبؤ ثم الكشف هذا بشكل مباشر وإعادة استخدامه بوتيرة ذاتية لاحقاً، استكشف AhaSlides.
