مهارات وكلاء الذكاء الاصطناعي ليست عالمية: النماذج الضعيفة تحتاج إلى نسختها الخاصة من التعليمات

لماذا تفشل النماذج الضعيفة حتى وهي تملك التعليمة

توصّلت مجموعة من الباحثين من جامعة الأكاديمية الصينية للعلوم وجامعة كاليفورنيا في سانتا كروز وجامعة سنغافورة الوطنية ومعهد هندسة البرمجيات التابع للأكاديمية الصينية للعلوم إلى مشكلة غير واضحة في وكلاء الذكاء الاصطناعي ذاتيي التعلّم: التعليمات التي يكتبها الوكيل بنفسه بناءً على المهام التي أنجزها (المسمّاة "المهارات" أو skills) لا تساعد جميع النماذج بالقدر نفسه.

تقوم فكرة التطور الذاتي للتسخير (harness self-evolution) على أن يُراكم الوكيل، دون لمس أوزانه، خبرته في شكل تعليمات نصية ويرجع إليها عند مواجهة مهام مشابهة لاحقًا. وعلى ثلاثة معايير قياسية وسبعة نماذج بمستويات مختلفة، وجد الفريق 103 زوجًا من "المهمة + المهارة" يختلف فيها تأثير التعليمة بشكل حاد: فبمساعدتها يحقق GPT-5.6-luna زيادة قدرها 31.1 نقطة، في حين يفقد النموذج الضعيف Gemma-4-E4B 8.8 نقطة مقارنة بعدم وجود أي تعليمة على الإطلاق. أي أن التعليمة ليست مجرد عديمة الفائدة للنموذج الضعيف — بل تجعل الأمر أسوأ فحسب.

قرأ الباحثون سجلات المحاولات الفاشلة وتبيّن أن المشكلة لا تتعلق بنقص المعلومات. في 86% من الحالات، انتهك النموذج الضعيف شرطًا مكتوبًا بوضوح في المهارة — إذ لم يتمكن ببساطة من الاستناد إليه بشكل صحيح. وانحصر تحليل حالات الفشل في أربعة سيناريوهات متكررة:

• مشاكل مع الأدوات — يحاول الوكيل استدعاء أداة غير موجودة، أو يخلط بين ملف وأداة، أو يتوقف بعد حدوث خطأ دون محاولة تجاوزه.
• فقدان سياق المهمة — ينتقل الوكيل إلى الأمثلة والمواد المرجعية الواردة في المهارة ناسيًا المهمة نفسها، أو يحفظ النتيجة في المكان الخطأ.
• اتباع غير مكتمل للتعليمات — يقوم الوكيل بعدة خطوات ويُخرج نتيجة، لكنه يستوفي جزءًا فقط من الشروط المكتوبة بوضوح في المهارة.
• غياب التحقق — تبقى أخطاء في الإجابة النهائية لأن الوكيل لا يعيد قراءة النتيجة أو يعيد حسابها بطريقة أخرى.

المهارة الفوقية كقالب عالمي لإعادة صياغة التعليمات

لحل هذه المشكلة، استعان الباحثون بنموذج Claude-Opus-5 كمساعد لصياغة "مهارة فوقية" (meta-skill) — بروتوكول ثابت لإعادة الكتابة، لا يعتمد على المهمة المحددة. ويتطلب هذا البروتوكول: الفصل في التعليمة بين الأدوات الفعلية والوثائق، ووصف فحوصات البيئة والأخطاء النمطية مسبقًا؛ البدء في المهارة بصياغة مهمة المستخدم وحدود التغييرات المسموح بها ومسار حفظ النتيجة، مع فصل ذلك بوضوح عن الأمثلة؛ صياغة كل شرط مع طريقة واضحة للتحقق من استيفائه؛ وإنهاء المهارة بخطوة مستقلة للتحقق الذاتي — إعادة قراءة النتيجة، وإعادة حسابها بطريقة أخرى، ومقارنتها بعتبة محددة، وتكرار العملية إذا لزم الأمر.

جُرِّب التأثير في نمطين. الأول دون سجلات تنفيذ: حصل النموذج القوي المعيد للكتابة Kimi-K3 فقط على المهمة والمهارة الأصلية وقائمة الأدوات المتاحة للمنفّذ، وأعاد كتابة المهارة وفق القالب الفوقي. وكانت النتيجة أن ثلاثة نماذج تنفيذية ضعيفة (Qwen3.6-flash وGemma-4-E4B وQwen3.5-9B) تحسّنت بمقدار 5.1 إلى 14.1 نقطة مقارنة بالتعليمة الأصلية. وللمقارنة: إذا أُعطي نفس النموذج Kimi-K3 عبارة واحدة فقط مثل "أعد الكتابة بما يعمل مع جميع النماذج" دون المهارة الفوقية، يكون التحسّن أقل بكثير وغير مستقر — بل تراجع أداء Qwen3.5-9B قليلًا. وتضيف المهارة الفوقية 5.1 إلى 6.0 نقطة إضافية — أي أكثر من نصف المكسب النهائي.

التعلّم الذاتي في حلقة متكررة: النموذج يعيد كتابة تعليمته بنفسه

النمط الثاني هو حلقة واقعية من خمس جولات، ينفّذ فيها النموذج المهمة بنفسه ويعيد كتابة تعليمته الخاصة بناءً على أثر التنفيذ ورد أداة التحقق. وهنا تبدو النتائج دالة: دون المهارة الفوقية، لا تساعد إعادة الكتابة الذاتية النماذج الضعيفة إلا بشكل طفيف وتعمل بشكل غير مستقر — يبلغ Qwen3.5-9B قمته في الجولة الثالثة ثم ينحدر تقريبًا إلى مستوى البداية، بينما يبقى النموذج الأضعف، Gemma-4-E4B، دون خط الأساس في جميع الجولات. ومع المهارة الفوقية، تتغيّر الصورة: تتجاوز جميع النماذج السبعة المختبرة — من Gemma-4-E4B إلى النموذج المتقدم Kimi-K2.5 — في الجولة الخامسة النسخة الخالية من المهارة الفوقية بمقدار 2.0 إلى 5.1 نقطة.

الاستنتاج العملي للفرق التي تبني وكلاء ذكاء اصطناعي بتعليمات ذاتية التعلّم: لا ينبغي الافتراض أن المهارة نفسها مفيدة بالقدر نفسه لنماذج مختلفة ضمن منظومة واحدة — سواء تعلّق الأمر بمنفّذ يستخدم نموذجًا رائدًا قويًا أو منفّذ يعتمد على نموذج مفتوح مصغّر. فإذا استخدم المشروع نماذج بمستويات متفاوتة، ينبغي تكييف التعليمات لكل منها على حدة بدلًا من نسخها حرفيًا — وإلا فقد يُظهر النموذج الضعيف نتيجة أسوأ من حالة عدم وجود أي تعليمة على الإطلاق.