MUX: метод непрерывного рассуждения LLM через мультиплексированные токены

في يوليو 2026، نشر باحثون على arXiv طريقة MUX (multiplexed tokens) — وهي وسيلة لإجراء استدلال نماذج اللغة في فضاء كامن (latent) متصل، حيث يُشفّر رمز كامن واحد دون فقدان أي معلومة جزءًا كاملًا من سلسلة الاستدلال بدلًا من كلمة واحدة فقط. ووفقًا للباحثين، تفوّقت MUX على أقوى الأساليب المرجعية (baselines) للاستدلال الكامن في 32 إعدادًا تقييميًا على أربعة نماذج لغوية في آن واحد.

لماذا يكون الاستدلال التقليدي بطيئًا

تُهدر نماذج الاستدلال الكلاسيكية الحوسبة: فكل خطوة في سلسلة الاستدلال تنقل كلمة فرعية (subword) واحدة فقط، ويُصرف جزء من كل خطوة على التعبير اللفظي عن الفكرة بدلًا من الحساب نفسه. يسمي مؤلفو MUX هذا "عنق زجاجة" حوسبيًا: فالنموذج يستدل باللغة الطبيعية، لذا فإن سعة الخطوة الواحدة محدودة بحجم رمز subword واحد — وعلى السلاسل الطويلة يتحول هذا إلى حوسبة مهدرة.

ما هي الرموز المُعدَّدة (multiplexed)

تُقطّر MUX سلسلة استدلال منفصلة إلى رموز كامنة متصلة. يُدرَّب كل رمز من هذا النوع على تمثيل تراكب خطي موزون (تعديد/multiplexing) لنطاق كامل من الكلمات الفرعية، وهذا التراكب قابل للعكس: يمكن استعادة النطاق الأصلي من الكلمات الفرعية بالكامل (إزالة التعديد/demultiplexing). الفكرة الأساسية هي جعل الضغط قابلًا للعكس بحكم البنية، وليس تقريبيًا: عندها لا "يختصر" النموذج الطريق، ويحافظ على كامل منطق الاستدلال الأصلي.

*الطريقة — MUX، النسخة الأولية على arXiv برقم 2607.18264، نوع النشر "new" (يوليو 2026)

*الآلية — رمز كامن واحد يساوي مجموعًا موزونًا لعدة كلمات فرعية منفصلة من الاستدلال

*قابلية العكس — تراكب دون فقدان، ويمكن استعادة نطاق الكلمات الفرعية بالكامل

*الترجيح — يعتمد على الموضع، مثلًا تناقص هندسي للأوزان

*ميزة إضافية — استكشاف متوازٍ لعدة فروع حل في المهام التي تتطلب البحث

يُثبت المؤلفون أن أوزانًا بسيطة تعتمد على الموضع — مثل التناقص الهندسي المناسب — توفر تعديدًا دون فقدان. وهذا بدوره يمنع "الانهيار الكامن": سلوكًا انتكاسيًا مختصرًا (shortcut) ينهار فيه التمثيل الكامن للنموذج ويتوقف عن الاستدلال الفعلي.

إلى أي مدى تتفوق MUX على البدائل

تفوّقت MUX على أقوى الأساليب المرجعية للاستدلال الكامن في 32 إعدادًا تجريبيًا تغطي أربعة نماذج لغوية مختلفة، وفقًا لملخص المؤلفين على arXiv. والأمر يتعلق بتفوق ليس على نموذج واحد، بل على فئة كاملة من أساليب الاستدلال الكامن — عبر كامل شبكة الـ32 إعدادًا. بالإضافة إلى ذلك، أظهرت تحليلات الاستئصال (ablation) والفحص (probing) أن الرموز الكامنة المتعلَّمة تُشفّر استدلالًا صحيحًا وقابلًا للتفسير، وليس ضجيجًا عشوائيًا.

وثمة نتيجة منفصلة تتمثل في القدرة على البحث المتوازي: يمكن للاستدلال المُعدَّد أن يستكشف في آنٍ واحد عدة فروع حل في المهام التي تتطلب تجربة خيارات متعددة.

"التراكب دون فقدان كهدف تدريب محلي شرط كافٍ لاستدلال متصل قوي وفعّال

في الفضاء الكامن"، كما جاء في ملخص دراسة MUX على arXiv.

ماذا يعني هذا

الاستدلال الكامن محاولة لإزالة "ضريبة اللغة" عن نماذج الاستدلال: الحساب في فضاء متصل مدمج بدلًا من سلاسل نصية طويلة. وإذا تكررت نتائج MUX على نماذج أكبر، فسيكون ذلك طريقًا نحو استدلال أرخص وأسرع دون فقدان الدقة أو قابلية التفسير — أي نحو ذكاء اصطناعي استدلالي ينفق حوسبة أقل على المهام نفسها.

أسئلة شائعة

ما هي الرموز المُعدَّدة؟

هي رموز كامنة متصلة، يُشفّر كل منها مجموعًا موزونًا لعدة كلمات فرعية من سلسلة الاستدلال في آنٍ واحد. وبحكم البنية، يكون التراكب قابلًا للعكس — إذ يمكن استعادة النطاق الأصلي من الكلمات الفرعية بالكامل، لذا لا تُفقد أي معلومة.

بماذا تختلف MUX عن سلسلة الاستدلال التقليدية؟

تنقل سلسلة chain-of-thought التقليدية كلمة فرعية واحدة في كل خطوة وتستدل عبر النص. أما MUX فتضغط جزءًا كاملًا من الاستدلال في رمز كامن واحد وتحسب في فضاء متصل — وهذا يرفع السعة، ووفقًا للمؤلفين، يتفوق على الأساليب المرجعية الكامنة في 32 إعدادًا اختباريًا على أربعة نماذج.