باحثون يثبتون: تضخيم AGENTS.md ضار، وللملف حدٌّ أقصى لا يجوز تجاوزه

نُشرت على arXiv الورقة 2610.11007 حول الطريقة الصحيحة لإدارة ملفات السياق الخاصة بوكلاء LLM، مثل AGENTS.md. يصوغ المؤلفون المسألة على أنها مسألة اختيار تشكيلة (assortment problem) في ظل انتباه محدود للنموذج. فكل رمز (token) في الملف يُدفع ثمنه من جديد في كل جولة من الجلسة، كما أن التعليمات الجديدة تقلّل التزام النموذج بالتعليمات القديمة. يثبت المؤلفون أن للملف الأمثل حدًّا أعلى للحجم لا يعتمد على عدد التعليمات المرشحة. أما الأسلوب المعتاد، أي إلحاق كل القواعد «المفيدة عمومًا»، فقد يكون أسوأ بكثير، وبلا سقف، من اختيار مجموعة فرعية منها. وتؤكد تجارب أُجريت على قواعد مأخوذة من ملفات حقيقية أن التعليمات غير ذات الصلة تخفض مستوى الالتزام بالتعليمات. • حجم الملف الأمثل محدود. • حذف القواعد التي يتجاهلها الوكيل قد يزيل معها قواعد مفيدة. • لا ينبغي إضافة قاعدة جديدة إلا بعد تراكم الأدلة.

معالج بواسطة الذكاء الاصطناعي من arXiv cs.AI؛ بتحرير Hamidun News
باحثون يثبتون: تضخيم AGENTS.md ضار، وللملف حدٌّ أقصى لا يجوز تجاوزه
المصدر: arXiv cs.AI. كولاج: Hamidun News.
استمع للمقال
بطاقة الحقائق والأرقام
المعيارالتفاصيل
المصدر الأصليarXiv cs.AI ↗
رئيس التحرير
حقيقة رئيسية #1حجم الملف الأمثل محدود.
حقيقة رئيسية #2حذف القواعد التي يتجاهلها الوكيل قد يزيل معها قواعد مفيدة.
حقيقة رئيسية #3لا ينبغي إضافة قاعدة جديدة إلا بعد تراكم الأدلة.

تصف ورقة arXiv 2610.11007 ملف سياق الوكيل، سواء كان AGENTS.md أو ما يماثله، بوصفه مسألة تحسين. ففي بداية كل جلسة يحمّل وكيل LLM هذا الملف بالكامل، ويُدفع ثمن كل رمز (token) فيه من جديد في كل جولة لاحقة. ويثبت المؤلفون وجود حد أعلى للحجم الأمثل للملف، ولا يعتمد هذا الحد على عدد التعليمات المرشحة المتاحة. فمهما راكم الفريق من القواعد، تكون مفيدة حتى حجم معيّن، وما بعده يصبح الملف ضارًّا فقط.

وعمليًا تنمو هذه الملفات عادةً بالإلحاق. يخطئ الوكيل، فيضيف أحدهم سطرًا. وبعد نصف عام يحتوي الملف على مئات الأسطر، ولا أحد يعرف أيّها يعمل فعلًا.

النموذج: الملف كرفّ ذي انتباه محدود

يصوغ المؤلفون مسألة تنسيق الملف (curation) على أنها capacitated assortment problem، أي اختيار تشكيلة في ظل سعة محدودة. فالتعليمات تستهلك رموزًا، وانتباه النموذج محدود. وإضافة تعليمة جديدة لا ترفع أبدًا احتمال تنفيذ التعليمات الأخرى، بل قد تخفضه فقط. كما أن لكل تعليمة تبقى في الملف تكلفة صيانة في كل جلسة.

تنتج عن هذه الافتراضات نتيجتان:

  • للملف الأمثل سقف للحجم لا يعتمد على عدد التعليمات المرشحة.
  • استراتيجية «إضافة كل ما هو مفيد بمفرده» قد تخسر، من حيث صافي المنفعة، أمام المجموعة الفرعية المثلى بفارق كبير بلا حدود.
  • يحدّ سقف الرموز من الخسائر حتى لو قُدِّرت تكلفة الرمز بأقل من قيمتها الفعلية.

والنقطة الأخيرة عملية. فمن الصعب حساب التكلفة الدقيقة للرمز داخل حلقة عمل الوكيل، لكن وضع حد صارم لحجم الملف يقي من الخطأ الفادح.

التغذية الراجعة المحجوبة (Censored feedback)

يتناول الجزء الثاني من الورقة التعلّم من الجلسات السابقة، وهنا ينشأ انحياز في البيانات. فيمكن رصد فائدة التعليمات المحمّلة وضررها. أما التعليمة الغائبة فلا تترك أثرًا إلا إذا أدى غيابها إلى خطأ. وإذا لم تكن القاعدة موجودة وسارت الأمور بسلاسة، فلا يمكن معرفة شيء عن هذه القاعدة. وهذا هو الحجب (censoring).

ويقود ذلك إلى استنتاج غير مريح. فإذا حُذفت التعليمات التي يتجاهلها الوكيل، فسيُحذف معها حتمًا بعض التعليمات المفيدة. وغياب أثر ملحوظ في السجلات لا يثبت أن القاعدة عديمة الفائدة.

ويحدد المؤلفون أيضًا مقدار الأدلة اللازم جمعه قبل إضافة تعليمة جديدة. كما يقدّرون الندم (regret) في الحالة التي لا يتمكن فيها المراجعون من البشر إلا من فحص عدد محدود من التعديلات في الفترة الواحدة. وهذا يصف عملية حقيقية: يقترح منسّق آلي تغييرات، ولا يستطيع الإنسان فعليًا مراجعتها كلها.

ماذا أظهرت التجارب

وصف الملخص الجزء التجريبي بإيجاز. فالقواعد غير ذات الصلة، المأخوذة من ملفات سياق حقيقية، تخفض مستوى تنفيذ النموذج اللغوي للتعليمات. وهذا يتسق مع النظرية، لكن الملخص لا يتضمن أرقامًا محددة. أما أي النماذج اختُبرت وبأي مقدار تراجعت الدقة، فلن يتضح إلا من النص الكامل. والنتائج أولية حتى الآن: هذه هي النسخة الأولى من المسودة البحثية (preprint) دون مراجعة الأقران.

كيف يمكن تطبيق ذلك الآن

بالنسبة إلى الفرق التي تدير AGENTS.md أو CLAUDE.md أو ملفات مشابهة، تُستخلص من الورقة بضع قواعد:

  • ضعوا حدًّا صارمًا لحجم الملف، وناقشوا أي تجاوز له بشكل صريح.
  • أضيفوا القاعدة الجديدة بعد عدة إخفاقات متكررة، لا بعد الإخفاق الأول.
  • لا تحذفوا قاعدة لمجرد أن الوكيل «لا يستجيب» لها، بل تحققوا أولًا مما إذا كانت تمنع أخطاء صامتة.
  • أعيدوا بناء الملف دوريًا من مجموعة فرعية من أفضل القواعد، وقارنوه بالملف الحالي على مهام حقيقية.
  • مرّروا التعديلات الآلية عبر المراجعة على دفعات صغيرة، مع مراعاة محدودية انتباه المراجعين.

هذه ورقة نظرية، وتستند استنتاجاتها إلى افتراضات النموذج، ومنها مثلًا أن التعليمة الجديدة لا ترفع مستوى تنفيذ التعليمات الأخرى. لكنها تقدم حجة رسمية ضد عادة الإلحاق اللانهائي في ملف الوكيل.

أسئلة وأجوبة حول الخبر

ما أبرز التفاصيل حول النموذج: الملف كرفّ ذي انتباه محدود؟

يصوغ المؤلفون مسألة تنسيق الملف (curation) على أنها capacitated assortment problem، أي اختيار تشكيلة في ظل سعة محدودة. فالتعليمات تستهلك رموزًا، وانتباه النموذج محدود. وإضافة تعليمة جديدة لا ترفع أبدًا احتمال تنفيذ التعليمات الأخرى، بل قد تخفضه فقط. كما أن لكل تعليمة تبقى في الملف تكلفة صيانة في كل جلسة. تنتج عن هذه الافتراضات نتيجتان: للملف الأمثل سقف للحجم لا يعتمد على عدد التعليمات المرشحة. استراتيجية «إضافة كل ما هو مفيد بمفرده» قد تخسر، من حيث صافي المنفعة، أمام المجموعة الفرعية المثلى بفارق كبير بلا حدود. يحدّ سقف الرموز من الخسائر حتى لو قُدِّرت تكلفة الرمز بأقل من ق

ما أبرز التفاصيل حول التغذية الراجعة المحجوبة (Censored feedback)؟

يتناول الجزء الثاني من الورقة التعلّم من الجلسات السابقة، وهنا ينشأ انحياز في البيانات. فيمكن رصد فائدة التعليمات المحمّلة وضررها. أما التعليمة الغائبة فلا تترك أثرًا إلا إذا أدى غيابها إلى خطأ. وإذا لم تكن القاعدة موجودة وسارت الأمور بسلاسة، فلا يمكن معرفة شيء عن هذه القاعدة. وهذا هو الحجب (censoring). ويقود ذلك إلى استنتاج غير مريح. فإذا حُذفت التعليمات التي يتجاهلها الوكيل، فسيُحذف معها حتمًا بعض التعليمات المفيدة. وغياب أثر ملحوظ في السجلات لا يثبت أن القاعدة عديمة الفائدة. ويحدد المؤلفون أيضًا مقدار الأدلة اللازم جمعه قبل إضافة تعليمة جديدة. كما يقدّرون الندم (regret)

ما أبرز التفاصيل حول ماذا أظهرت التجارب؟

وصف الملخص الجزء التجريبي بإيجاز. فالقواعد غير ذات الصلة، المأخوذة من ملفات سياق حقيقية، تخفض مستوى تنفيذ النموذج اللغوي للتعليمات. وهذا يتسق مع النظرية، لكن الملخص لا يتضمن أرقامًا محددة. أما أي النماذج اختُبرت وبأي مقدار تراجعت الدقة، فلن يتضح إلا من النص الكامل. والنتائج أولية حتى الآن: هذه هي النسخة الأولى من المسودة البحثية (preprint) دون مراجعة الأقران.

ZK
جمال حميدون — مدير المنتجات في Alpina Digital ومدير منتج AlpinaGPT. يبني منتجات الذكاء الاصطناعي منذ 2019. بدأ Hamidun News كمشروع شخصي ثم أصبح مُجمِّعًا إنتاجيًا بأكثر من 6000 قارئ.
✦ Autonomous AI Agents

Delegate Deep Research, Coding & Workflows to an AI Agent

Deploy autonomous multi-step execution with NomadNet Agent (agent.nomadnet.ai) — automated web research, data synthesis, code generation, and complex task orchestration.

Launch NomadNet Agent →NomadNet AI Platform
ما رأيك؟
جارٍ تحميل التعليقات…