التحقق من صلاحية النماذج في البنوك

التحقق من صلاحية نموذج في بنك مراجعة منهجية لملاءمته المفاهيمية وصحة تنفيذه وكفاية الأدلة لاستخدامه المقصود. إعادة إنتاج الدرجة الرئيسية التي يعرضها المطور جزء فقط من العمل. ويشمل الفحص تعريف الهدف والبيانات المتاحة وقت القرار والنتائج المرصودة وعدم اليقين والقيود وضوابط استخدام الناس للمخرج.

يركز هذا الدليل ضمن خدمة تدقيق الذكاء الاصطناعي على نموذج افتراضي يقدر احتمال التعثر خلال سنة لمحفظة تمويل منشآت صغيرة ومتوسطة. والغرض شرح كيفية فحص أدلة النموذج وحدودها، دون تقديم قرار ائتماني أو توصية بشأن معالجة رأس المال أو المخصصات. كما يميز التحقق من صلاحية النموذج عن مراجعة التشغيل الأوسع التي يتناولها تدقيق الذكاء الاصطناعي للقطاع المصرفي. لا يمثل الفحص التقني التجاري تلقائياً موافقة من الجهة الإشرافية أو رأي تأكيد مهني نظامي؛ فتلك النتائج تتطلب أطرها وصلاحياتها ونطاقاتها المحددة.

حدد استخدام النموذج قبل تطبيق المعايير التنظيمية

لا تخضع أداة لترتيب قائمة إنذار مبكر تلقائياً لكل المتطلبات التفصيلية لنموذج رأس مال قائم على التصنيفات الداخلية. سجل الكيان والمحفظة والغرض والموافقات ذات الصلة والاستخدامات اللاحقة الفعلية. فقد يدخل مخرج صمم للرصد في منح الائتمان أو حساب رأس المال لاحقاً؛ لذا لا تعتمد المراجعة على اسم المشروع الأصلي وحده.

ضمن متطلبات SAMA لمخاطر الائتمان وفق منهج التصنيفات الداخلية، يتناول القسم الثامن للتحقق من التقديرات الداخلية مقارنة التعثر الفعلي باحتمالات التعثر المقدرة، ومنها تحديث التحليل والتوثيق المحددين سنوياً على الأقل. لا تعمم هذا الالتزام المحدد كقاعدة تدقيق سنوي لكل تطبيق ذكاء اصطناعي في البنك.

يحدد مسؤولو التنظيم ومخاطر النماذج المعايير المنطبقة وإصداراتها الحالية. يناقش دليل التدقيق المرتبط بمتطلبات SAMA خريطة الالتزامات. أما المنهج الأصلي هنا فيكيف وفق الاستخدام والمحفظة والأدلة، ولا تقرر قائمة عامة اعتماد نموذج لغرض منظم بعينه.

صغ سؤال التحقق بدقة

حدد في المثال هل يقدر المخرج تعثر المقترض أو التسهيل أو وحدة أخرى خلال الاثني عشر شهراً التالية. عرف حدث التعثر وبداية الرصد، وبيّن هل يعكس الاحتمال الظروف الحالية أم مفهوم معايرة أطول أجلاً. تحدد هذه الخيارات مقارنة النتائج ذات المعنى وتفسير الانحراف الظاهري.

صف مجتمع الاستخدام المقصود. قد تختلف الأدلة للعميل الجديد والقائم ومن يملك سجلاً مالياً محدوداً. يجب أن تكون الاستبعادات قابلة للإنفاذ تشغيلياً لا مكتوبة في تقرير التطوير فقط. وإذا أمكن للموظف تقييم شريحة مستبعدة عبر واجهة الإنتاج، فافحص مدى فاعلية القيد في منع الاستخدام غير المدعوم بالأدلة فعلياً.

افصل المخرج الخام عن تحويله إلى درجات والتجاوزات البشرية وقواعد السياسة اللاحقة. فقد يستخدم احتمال صحيح بصورة غير مناسبة، أو تتلقى قاعدة صحيحة مخرجاً تالفاً. حدد طبقات الفحص وعلاقة عملية القرار بها، ولا تنسب كل نتيجة بصمت إلى النموذج الإحصائي.

أعد بناء البيانات كما كانت عند إصدار التنبؤ

حدد لكل متغير مصدره وتحويلاته ووقت إتاحته واستخدامه المسموح. فقد تنتهي الفترة المالية قبل التقييم لكن تصل القوائم بعده. واستخدام أحدث قيمة في اختبار تاريخي قد يدخل معلومات مستقبلية. السؤال هو متى استطاع البنك معرفة القيمة فعلاً، لا الفترة التي تصفها وحدها.

افحص التعديلات والتصحيحات المتأخرة. قد يستبدل مستودع البيانات رقم مبيعات أو تصنيفاً دون حفظ القيمة السابقة. يحتاج المتحقق إلى إعادة بناء موثوقة أو قيد صريح. وعند تعذرها قد يوضح تحليل الحساسية الأثر المحتمل، لكنه لا يحول مدخلات تاريخية غير مؤكدة إلى حقائق مرصودة.

تتبع معالجة القيم المفقودة وربط الفئات إلى الإنتاج. قد يختلف سلوك شيفرة التطوير عن واجهة الاستدعاء أو المهمة الدفعية. افحص حالات حدية منضبطة تشمل فئات غير مألوفة وقيماً استثنائية. واحتفظ بالحسابات الوسيطة لتحديد موضع الاختلاف بدلاً من مقارنة الدرجة المقربة وحدها.

تتناول متطلبات SAMA لتصميم نظام التصنيف، في نطاق التصنيفات الداخلية، توثيق النموذج وملاءمة البيانات واختبارات خارج الفترة وخارج العينة. توفر الإجراءات العملية أدلة للأسئلة ذات الصلة؛ ولا يثبت الاستشهاد بالقاعدة امتثال تنفيذ محدد لها.

أنشئ مجموعة نتائج تطابق الهدف

يحتاج اختبار سنة إلى أفق رصد مناسب. فقد لا تتوافر اثنا عشر شهراً للمقترض الذي قيّم حديثاً. لا تصنفه غير متعثر لمجرد عدم ظهور تعثر حتى الآن. اعرض المشاهدات غير الناضجة مستقلة أو استخدم طريقة مبررة للرصد غير المكتمل مع إظهار افتراضاتها.

حدد معاملة الخروج والتحويل وإعادة الهيكلة والتعثر المتكرر وفق تعريف الهدف المعتمد. وقد يوفر الحساب المغلق نتيجة مكتملة لسؤال على مستوى المقترض أو لا يوفرها. احسم ذلك مع مالكي النموذج والبيانات. فاستبعاد الحالات الصعبة بلا تفسير قد يغير معدل التعثر ومجتمع الاستخدام الذي يبدو النموذج صالحاً له.

تسهيلات المقترض الواحد ودرجاته الشهرية المتكررة مشاهدات مترابطة. وقد يبالغ عد كل صف مستقلاً في قوة الأدلة. اختر وحدة تحليل تطابق الهدف، واحتفظ بالتجميع المناسب واستخدم عدم يقين يراعي البنية. يساعد دليل المجتمع والعينات على تحديد ما تمثله السجلات فعلاً.

افصل القدرة على ترتيب المخاطر عن معايرة الاحتمال

قد يرتب النموذج المقترضين بحسب المخاطر بصورة مفيدة، لكنه يقدر احتمالات تعثرهم بأقل من مستواها الفعلي بصورة منهجية. وقد يتطابق المتوسط مع المحفظة بينما يضعف التمييز داخلها. تناقش أبحاث بازل للتحقق من التصنيفات التمييز والمعايرة كسؤالين مختلفين. وهي خلفية منهجية لا بديل عن المتطلبات السعودية المنطبقة.

افحص للترتيب مقياس تمييز مناسباً وعدم يقينه وأداء الشرائح المؤثرة. لا تعتبر المساحة تحت المنحنى AUC أو غيرها تحققاً كاملاً. وللمعايرة، قارن الاحتمالات بالتواتر المرصود في الدرجات أو النطاقات والفترات المناسبة. فسر المقارنة في ضوء مفهوم المعايرة المعلن والظروف الاقتصادية.

مجموعة افتراضية مكتملة الرصد لمقارنة احتمال التعثر السنوي، وليست حدوداً تنظيمية

النطاق	المقترضون	متوسط الاحتمال	التعثر المتوقع	التعثر المرصود	المعدل المرصود
الأدنى	200	1%	2	3	1.5%
المتوسط	200	3%	6	8	4%
الأعلى	100	12%	12	19	19%
الإجمالي	500	4% متوسط مرجح	20	30	6%

عدد حالات التعثر المتوقع هو مجموع احتمالات التعثر الفردية؛ وتنتج متوسطات النطاقات في المثال المبسط المجموع نفسه. وجود ثلاثين حالة مرصودة مقابل عشرين متوقعة يعطي نسبة مرصود إلى متوقع قدرها 1.5، ويبلغ الفرق بين المعدلين الإجماليين نقطتين مئويتين. تحدد الحسابات تفاوتاً للتحقيق، ولا تثبت وحدها مخالفة تنظيمية أو عيباً في النموذج أو استجابة مناسبة لرأس المال.

تحافظ النطاقات الثلاثة على ترتيب المعدل المرصود، لكن ذلك لا يكفي لإعلان قوة التمييز العام. ولا تثبت مجموعة واحدة المعايرة طويلة الأجل. راجع عدم اليقين وترابط المقترضين وتعريف النتائج وتغير المحفظة والاقتصاد قبل تقدير الجوهرية وفق معايير البنك المعتمدة.

راجع السلامة المفاهيمية لا الأداء وحده

اسأل لماذا يفترض أن تقدر المتغيرات والمنهج المخاطر المقصودة. قد تكون العلاقة قوية إحصائياً لأنها تعكس أثراً لمعالجة البيانات أو قراراً اتخذ بعد ظهور مؤشرات ضائقة مالية. افحص الآلية المعقولة والاستقرار والمتغيرات التي يتغير معناها بين الشرائح. ووثق مواضع عدم اليقين في التفسير.

اختبر الحساسية لتغير مدخل ذي معنى وللحالات الحدية. قد تكشف حركة غير معقولة خطأ تنفيذ أو تفاعلاً غير مستقر أو حاجة لتقييد الاستخدام. حافظ على تركيبات متسقة اقتصادياً عندما يتطلب السؤال ذلك. فتغيير حقل اعتباطياً قد ينتج مقترضاً غير ممكن ونتائج يصعب تفسيرها.

قارن بنموذج منافس مبرر أو خط أساس أبسط لفهم ما يضيفه التعقيد، دون افتراض تفوق الأبسط دائماً. استخدم بيانات وآفاقاً ومعالجة مسبقة متكافئة. وإذا امتلك المنافس معلومات غير متاحة للإنتاج، فاشرح هذه الميزة بدلاً من وصف المقارنة بالمتكافئة.

اجعل قرارات التطوير والتحقق والاختبار قابلة للتتبع

سجل البيانات التي أثرت في اختيار المتغيرات والتدريب والضبط والتقييم النهائي. تكرار اختيار النموذج على مجموعة مخصصة أصلاً للاختبار يجعلها معلومات تطوير. حافظ على فحص منفصل فعلاً حيث أمكن وصرح بالقيد عند تعذره. يناقش دليل نزاهة التقييم التسرب والإفصاح الانتقائي.

ينبغي أن يمثل الاختبار خارج الفترة زمناً لاحقاً لم يدخل في قرارات التطوير ذات الصلة. ويجيب الاختبار خارج العينة عن فصل آخر؛ ولا يثبت الاسم وحده غياب التسرب. فقد يعبر مقترضون مرتبطون أو نوافذ متداخلة أو نتائج معاد استخدامها التقسيم الظاهري. افحص التواريخ والتجميع لا أسماء الملفات فقط.

احفظ سجل مصادر البيانات وتحويلاتها من الاستخراج إلى النتائج. يجب معرفة نسخة النموذج المنتجة للنتيجة وأثر الاستبعادات في المجموعة. وإذا أعاد المطور التحليل بعد اعتراض، فاحتفظ بالنتيجة السابقة واشرح التغيير. الاستبدال الصامت يصعب التمييز بين التصحيح والإفصاح الانتقائي.

اختبر التنفيذ الذي يستخدمه البنك

قد يختلف نموذج التطوير المتحقق منه عن خدمة الإنتاج. طابق قيم المتغيرات والتحويلات والاحتمالات وربط الدرجات والتقريب. اختر حالات تكشف النقص والحدود وانتقالات السياسة لا السجلات المعتادة فقط. وحدد تسامحاً عددياً مبرراً للتنفيذ واشرح غرضه.

راجع التقييم الدفعي والتفاعلي منفصلين إذا اختلف مسارهما. افحص تسجيل نسخة النموذج مع كل درجة وسلوك غياب مدخل مطلوب. قد يكون البديل مبرراً، لكن لا ينبغي أن يتلقى المستخدم دون علم نتيجة نموذج آخر أو مدخلات قديمة. أثبت البديل الفعلي وحدود استخدامه المسموح.

افحص الوصول والتغيير حول ملفات النموذج وربط الدرجات والتجاوزات. لا يستبدل ذلك التقييم الأمني الكامل، لكنه يؤثر في صلاحية النتيجة. فالنموذج المختبر جيداً لا يسند استنتاجاً عن الإنتاج إذا تغير معنى الدرجة بعد التحقق عبر ربط غير مضبوط.

راجع التجاوزات البشرية كقرارات ذات أدلة مستقلة

قد تضيف التجاوزات معلومات مهمة خارج النموذج، لكن وجودها لا يثبت تحسن النتائج. سجل الدرجة الأصلية والسبب وصاحب الصلاحية والدرجة أو الإجراء الناتج. افحص مدى تحديد المبررات ووضوحها بما يسمح بمراجعتها، واتساق تطبيقها في الحالات المتشابهة.

عندما تنضج النتائج، قارن مجموعات التجاوز بحذر. فالبشر يختارون الحالات، وقد تختلط المقارنة بظروفها المختلفة. صف آلية الاختيار وحدودها بدلاً من إعلان فائدة سببية بناء على مقارنة خام لمعدلات التعثر.

افحص هل تخفي التجاوزات قيداً ينبغي معالجته مباشرة. فقد تبرر التصحيحات المتكررة لشريحة إعادة تطوير أو تقييداً أو تحسين بيانات. يعود القرار إلى حوكمة البنك، مستنداً إلى الأدلة وعواقب الاستمرار.

استخدم مصفوفة قرار للتحقق

مصفوفة أصلية تربط أدلة نموذج تعثر المنشآت الصغيرة والمتوسطة بالقرار

السؤال	الأدلة	نتيجة محتملة	القرار التالي ومسؤوله
هل توافرت المعلومة وقت التقييم؟	تواريخ الإتاحة وإعادة بناء المتغيرات.	دخل تحديث مالي لاحق في الاختبار التاريخي.	يعيد مالك البيانات البناء ويقيم المتحقق النتائج المتأثرة.
هل اكتمل رصد النتائج؟	تواريخ التقييم والمتابعة وسجلات التعثر.	احتسبت حالات غير ناضجة كغير متعثرة.	تصحيح تصميم النتيجة قبل تفسير المعايرة.
هل يتطابق التنفيذ؟	مطابقة مستقلة للدرجات في الحالات الحدية.	تختلف معالجة النقص بين الإنتاج والتطوير.	تصحيح هندسي وإعادة اختبار مركزة.
هل الاستخدام مسند؟	الغرض المعتمد وأدلة الشرائح والاستخدام الفعلي.	شريحة جديدة بلا أدلة تحقق.	يقترح المالك تقييداً أو تحققاً إضافياً للاعتماد.
هل المراجعة مستقلة؟	الأدوار والمشاركة السابقة وترتيبات الفحص.	سيراجع الشخص قرارات تصميمه.	تعيين مراجعة مستقلة مناسبة أو الإفصاح عن القيد.

المصفوفة أداة داخلية وليست نموذجاً تفرضه SAMA. تفصل النتيجة عن القرار الإداري الذي تسنده. قد يوصي التقرير بقيود أو عمل إضافي، لكنه لا يدعي أن المدقق يخول استعمال البنك المنظم للنموذج بنفسه.

تعامل بحذر مع ندرة التعثر والمقارنات الخارجية

قد لا تسند محفظة قليلة التعثر نتيجة دقيقة لكل درجة. يزيد دمج الدرجات عدد الأحداث لكنه قد يخفي ضعفاً محلياً، وقد يدخل تمديد الفترة معايير منح وظروفاً اقتصادية قديمة. صف هذه المفاضلات صراحة؛ فزيادة البيانات لا تجعلها أكثر صلة بالاستخدام الحالي تلقائياً.

قد تضيف المقارنات الخارجية سياقاً، لكن قارن التعريفات وتركيب المقترضين والمنطقة والأفق وممارسات الإبلاغ قبل تفسير الفارق. معدل منشور لمجتمع آخر لا يستبدل أدلة البنك. وإذا جمعت بيانات، فوثق الأوزان وسبب إفادة المجتمع المجمع في الحكم على النموذج.

لا تعتبر غياب التعثر المرصود دليلاً على أن الاحتمال ينبغي أن يساوي الصفر. وقد تولد أحداث قليلة بين مقترضين مرتبطين إشارة تحتاج تفسيراً يراعي الترابط. وضح ما تميزه الأدلة وما يبقى غير مؤكد والقيود أو المشاهدات الإضافية التي ينبغي للإدارة النظر فيها.

في مثال العشرين حالة المتوقعة والثلاثين المرصودة، تبدأ الخطوة المسؤولة بمطابقة كل حدث وتنبؤه ثم فحص تركّز الزيادة في شريحة أو فترة. تحقق من تعريف الحدث والمتغيرات التاريخية قبل نسبتها إلى الاقتصاد. يبقى التفسير الاقتصادي المريح فرضية ما لم يسنده الدليل.

اتفق على معايير التصعيد قبل اختيار الاختبار الأكثر طمأنة. وإذا أنتجت طرق معقولة تفسيرات مختلفة، فاعرض هذه الحساسية وافتراضاتها. اختيار الطريقة التي تتجنب التصعيد وحدها يضعف المراجعة المستقلة. وقد يفيد الاستنتاج المشروط بتحديد فجوة يجب حسمها قبل توسيع الاستخدام إلى شريحة أخرى.

حدد الاستقلالية والكفاءة لكل مهمة تحقق

حدد المطور والمشغل والمتحقق ومن يعتمد الاستخدام. قد تخلق المشاركة السابقة في التصميم مخاطر مراجعة الذات. قيمها لمهمة التحقق الفعلية ووثق الضمانات أو المراجعة المنفصلة أو القيود. يوضح دليل الاستقلالية لماذا لا يكفي إعلان عام.

يجب أن تطابق الكفاءة الأسئلة؛ فقد يحتاج تفسير مخاطر الائتمان والإحصاء وهندسة البيانات والإنتاج إلى اختصاصات مختلفة. لا تخف نقص القدرة خلف قائمة طويلة. عند غياب الخبرة أو الوصول، ضيق الاستنتاج أو رتب فحصاً إضافياً بدلاً من الإيحاء بتحقق كامل.

اعرض القيود وشروط الاستخدام ومتطلبات الإعادة

حدد نسخ النموذج والتنفيذ والاستخدامات والمجموعات المختبرة ونضج النتائج والطرق والنتائج الجوهرية وفجوات الأدلة. بيّن دعم الاستخدام المقترح تحت شروط محددة. تجنب علامة نجاح تخفي استبعاد شريحة مؤثرة أو اختلاف تنفيذ غير محسوم.

حدد شروط الإغلاق. فقد يتطلب تصحيح مستخرج إعادة حساب جميع المقاييس المتأثرة، بينما يحتاج اختلاف النشر إلى مطابقة مركزة وفحص أثر أوسع. تميز أدلة إعادة الاختبار إنجاز التصحيح عن إثباته. وسجل قبول الإدارة لما بقي من عدم يقين منفصلاً.

اربط محفزات المراجعة بتغير النموذج والمصادر والمحفظة وإشارات الأداء والجدول المنطبق. لا يبرر الموعد الدوري تجاهل تغيير جوهري بين المراجعات، ولا يثبت تغيير صغير بطلان النموذج كله تلقائياً؛ بل يحتاج تقييم أثر مبرراً.

جهز بند جرد النموذج وبيان استخدامه وتقرير التطوير وقاموس البيانات وتعريف المجموعات ونتيجة قابلة للإعادة ببيانات محمية. ناقش أدلة ونطاق التحقق من النماذج المصرفية لتحديد ما يمكن مراجعته باستقلال والقرارات الباقية لجهات البنك المخولة.