باحثو ورقة على arXiv يرصدون خمسة عيوب في مقاييس أمانة تفسيرات XAI
نُشرت على arXiv (قسم cs.AI) ورقة موقف عن مقاييس أمانة (faithfulness) التفسيرات في أساليب أهمية الميزات (feature importance). ويرى المؤلفون أن الذكاء الاصطناعي القابل للتفسير (XAI) لم يرفع الثقة بالنماذج خلال عشر سنوات. وبدلاً من ذلك، دفع المستخدمين إلى الثقة المفرطة بالتنبؤات الخاطئة، ثم إلى النفور الخوارزمي لاحقاً. ويحدد المؤلفون خمسة عيوب جوهرية في المقاييس الحالية، ويقترحون أربعة اتجاهات بحثية. • يعمل XAI أقرب إلى أداة لتصحيح الأخطاء منه إلى مصدر للثقة. • مقاييس الأمانة الحالية إما غير قابلة للتنفيذ أو مكلفة حسابياً. • لا تتضمن الورقة اختباراً معيارياً (benchmark): فهي موقف نظري وليست تجربة.
معالج بواسطة الذكاء الاصطناعي من arXiv cs.AI؛ بتحرير Hamidun News
لم يفِ الذكاء الاصطناعي القابل للتفسير خلال عقد كامل بوعده الرئيسي: لم يعلّم الناس كيف يثقون بالنماذج بقدر معقول. هذا ما تخلص إليه ورقة موقف على arXiv برقم arXiv:2610.12493 (قسم cs.AI، النسخة v1 بتاريخ 12 أكتوبر 2026). ويربط المؤلفون هذا الإخفاق بضعف أداء مقاييس أمانة التفسيرات (faithfulness) نفسها. فهم يسمّون خمسة عيوب جوهرية في هذه المقاييس، ويقترحون أربعة اتجاهات بحثية قد ترفع موثوقيتها.
الثقة لم ترتفع
كان المنطق الأصلي للصناعة بسيطاً. فإذا عُرض على الإنسان أي الميزات أثّرت في التنبؤ، فسيفهم النموذج بصورة أفضل ويثق به بالقدر المناسب. لكن الأدلة التي تراكمت خلال العقد الأخير تشير، بحسب تقدير المؤلفين، إلى عكس ذلك. فقد دفعت التفسيرات المستخدمين إلى الثقة المفرطة بالتنبؤات الخاطئة. وعندما كانت الأخطاء تنكشف، كان رد الفعل عكسياً، وهو ما يُعرف بالنفور الخوارزمي (algorithmic aversion).
ونتيجة لذلك، استقر XAI في دور مختلف. فهو قبل كل شيء أداة لتصحيح الأخطاء. ويقدّم ملاحظات متفرقة، مثل معرفة الميزات التي تعلّمها النموذج فعلاً. وهذا مفيد للمهندس. أما كآلية لبناء الثقة لدى المستخدم النهائي أو الجهة التنظيمية، فأداؤه أضعف بكثير.
أين تنكسر الأمانة
يرى المؤلفون أن أحد الأسباب الرئيسية يكمن في طبيعة التفسيرات نفسها. فالأساليب كثيراً ما تبالغ في تبسيط آلية عمل النموذج الداخلية، فينشأ عدم اتساق بين التفسير والنموذج. ويسمّى ذلك عدم الأمانة (unfaithfulness) أو infidelity. ويُفهم الـ faithfulness هنا على أنه درجة اقتراب التفسير من النموذج.
لو أمكن احتساب الأمانة بصرامة، لقدّمت تقييماً كمياً لأحد عناصر موثوقية التفسير. لكن المقاييس الحالية، كما تؤكد الورقة، تجعل هذا التقييم إما غير قابل للتنفيذ وإما مكلفاً حسابياً.
أبرز معالم الورقة:
- الصيغة: ورقة موقف (position paper) وليست تجربة أو اختباراً معيارياً.
- الموضوع: مقاييس الأمانة للتفسيرات من نوع أهمية الميزات (feature importance).
- التشخيص: خمسة عيوب جوهرية في المقاييس الحالية.
- المقترح: أربعة اتجاهات بحثية محتملة.
- المشكلة الأساسية: تقييم الأمانة إما غير ممكن التنفيذ أو مكلف جداً حسابياً.
لا يسرد الملخص المنشور العيوب الخمسة ولا الاتجاهات الأربعة. ولمعرفة مضمونها يجب الرجوع إلى النص الكامل للورقة. ولن نعرضها هنا بالتخمين.
ماذا يفعل الممارسون
الخلاصة العملية للفرق التي تستخدم خرائط أهمية الميزات وأدوات مشابهة واقعية إلى حد بعيد. فالأجدر اعتبار التفسير فرضية عن سلوك النموذج وليس دليلاً. والصورة الجيدة لا تقول شيئاً بعد عن مدى مطابقتها للحسابات الفعلية داخل الشبكة.
ولا يزال XAI مفيداً في مهام تصحيح الأخطاء. فيمكن استخدامه للبحث عن تسرّب البيانات والارتباطات الزائفة والميزات الغريبة. أما المنتجات التي يُعرض فيها التفسير على المستخدم أو المدقق، فالأفضل ألا تعتمد على مقياس أمانة واحد، وأن تخصص مسبقاً ميزانية حسابية للتحقق. وحيثما تكون الثقة مهمة بحكم القانون أو بسبب كلفة الخطأ، ينبغي اختبار ردود فعل الناس على التنبؤات الخاطئة مع التفسير ودونه كلٌّ على حدة. فهناك تحديداً، وفق البيانات التي يستشهد بها المؤلفون، ينشأ الميل نحو الثقة العمياء.
أما الباحثون فالرسالة لهم مختلفة. فما دام لا يوجد مقياس أمانة موثوق ورخيص، يصعب المقارنة بين أساليب التفسير. وهذا يعني أن ادعاءات من نوع «أسلوبنا أدق» ينبغي قراءتها بتحفظ.
أسئلة وأجوبة حول الخبر
ما أبرز التفاصيل حول الثقة لم ترتفع؟
كان المنطق الأصلي للصناعة بسيطاً. فإذا عُرض على الإنسان أي الميزات أثّرت في التنبؤ، فسيفهم النموذج بصورة أفضل ويثق به بالقدر المناسب. لكن الأدلة التي تراكمت خلال العقد الأخير تشير، بحسب تقدير المؤلفين، إلى عكس ذلك. فقد دفعت التفسيرات المستخدمين إلى الثقة المفرطة بالتنبؤات الخاطئة. وعندما كانت الأخطاء تنكشف، كان رد الفعل عكسياً، وهو ما يُعرف بالنفور الخوارزمي (algorithmic aversion). ونتيجة لذلك، استقر XAI في دور مختلف. فهو قبل كل شيء أداة لتصحيح الأخطاء. ويقدّم ملاحظات متفرقة، مثل معرفة الميزات التي تعلّمها النموذج فعلاً. وهذا مفيد للمهندس. أما كآلية لبناء الثقة لدى المستخدم
ما أبرز التفاصيل حول أين تنكسر الأمانة؟
يرى المؤلفون أن أحد الأسباب الرئيسية يكمن في طبيعة التفسيرات نفسها. فالأساليب كثيراً ما تبالغ في تبسيط آلية عمل النموذج الداخلية، فينشأ عدم اتساق بين التفسير والنموذج. ويسمّى ذلك عدم الأمانة (unfaithfulness) أو infidelity. ويُفهم الـ faithfulness هنا على أنه درجة اقتراب التفسير من النموذج. لو أمكن احتساب الأمانة بصرامة، لقدّمت تقييماً كمياً لأحد عناصر موثوقية التفسير. لكن المقاييس الحالية، كما تؤكد الورقة، تجعل هذا التقييم إما غير قابل للتنفيذ وإما مكلفاً حسابياً. أبرز معالم الورقة: الصيغة: ورقة موقف (position paper) وليست تجربة أو اختباراً معيارياً. الموضوع: مقاييس الأمانة
ما أبرز التفاصيل حول ماذا يفعل الممارسون؟
الخلاصة العملية للفرق التي تستخدم خرائط أهمية الميزات وأدوات مشابهة واقعية إلى حد بعيد. فالأجدر اعتبار التفسير فرضية عن سلوك النموذج وليس دليلاً. والصورة الجيدة لا تقول شيئاً بعد عن مدى مطابقتها للحسابات الفعلية داخل الشبكة. ولا يزال XAI مفيداً في مهام تصحيح الأخطاء. فيمكن استخدامه للبحث عن تسرّب البيانات والارتباطات الزائفة والميزات الغريبة. أما المنتجات التي يُعرض فيها التفسير على المستخدم أو المدقق، فالأفضل ألا تعتمد على مقياس أمانة واحد، وأن تخصص مسبقاً ميزانية حسابية للتحقق. وحيثما تكون الثقة مهمة بحكم القانون أو بسبب كلفة الخطأ، ينبغي اختبار ردود فعل الناس على التنبؤا
Access Frontier LLMs & Multimodal AI in One Workspace
Discover NomadNet AI (nomadnet.ai) — unified access to frontier language models, research synthesis, and multimodal workflows.
أهم ما في عالم الذكاء الاصطناعي — مرة كل أسبوع
سبع قصص مهمة فعلاً هذا الأسبوع، مختارة بعناية. بلا ضجيج ولا بيانات صحفية.
تم! تحقق من بريدك للتأكيد.