سؤال اليوم AAIA: كشف تسرب البيانات الزمني

AI audit training by expert Yazan Abu Ghosh for auditors with certifications.

سؤال امتحان AAIA — سؤال اليوم AAIA: كشف تسرب البيانات الزمني

سؤال امتحان AAIA: تدريب يومي لامتحان شهادة ISACA المتقدمة في تدقيق الذكاء الاصطناعي (AAIA) — المجال: AI Auditing Tools and Techniques.

السؤال

أثناء مراجعة نموذج تصنيف ائتماني، لاحظت فرق أداء غير متوقع بين التحقق العشوائي ومجموعة الاختبار. أي إجراء يعد الأكثر فاعلية لاكتشاف وجود تسرب بيانات زمني (temporal leakage) بين مجموعات التدريب والاختبار؟

  • أ. استخدام مجموعة اختبار زمنية مستقلة (out-of-time holdout) ومقارنة الأداء مع نتائج التقسيم العشوائي
  • ب. إزالة السمات ذات الارتباط العالي مع المتغير الهدف قبل إجراء التحقق لتقليل أثر التسرب
  • ج. استخدام k-fold cross-validation عشوائي عبر كامل البيانات لتقييم استقرار الأداء
  • د. قياس importance للسمات بواسطة permutation importance وملاحظة أي انخفاض كبير عند تبديل السمات المشبوهة
اعرض الإجابة والشرح

الإجابة الصحيحة: أ. استخدام مجموعة اختبار زمنية مستقلة (out-of-time holdout) ومقارنة الأداء مع نتائج التقسيم العشوائي

الاختيار الصحيح هو استخدام مجموعة اختبار زمنية مستقلة لأن تسرب البيانات الزمني يحدث عندما تتسرب معلومات من المستقبل إلى بيانات التدريب؛ مجموعة زمنية مستقلة (out-of-time) تحاكي بيئة الإنتاج وتكشف تحسناً مصطنعاً في الأداء الناتج عن تسرب معلومات زمنية. الخيارات الأخرى غير مناسبة: إزالة السمات المرتبطة بالهدف قد يخفي المشكلة أو يزيل سمات شرعية دون تحديد ما إذا كان التسرب زمنياً؛ k-fold العشوائي يخلط أطر الزمن ويخفي التسرب الزمني بدلاً من كشفه؛ permutation importance يمكن أن يحدد سمات مشبوهة لكنه لا يضمن كشف تسرب زمني محدد أو تمييزه عن ارتباط طبيعي، لذلك هو أقل تحديداً من اختبار خارجي زمني.

هل تريد المزيد من التدريب؟

استعد لامتحان شهادة ISACA المتقدمة في تدقيق الذكاء الاصطناعي (AAIA) مع إطار تدقيق الذكاء الاصطناعي والامتثال: أساليب عملية وتقييم.