إنجاز جديد: نماذج Transformer دون تطبيع تتفوق على المعايير القياسية
طوّر فريق من خريجي برنامج «ياو» في جامعة تسينغهوا، بقيادة لـيو تشوانغ، نسخة محسّنة من بنية Transformer لا تحتاج إلى التطبيع. ويُظهر هذا الابتكار أداءً أفضل، وقد يؤثر بشكل ملموس في تطوير نماذج معالجة اللغة الطبيعية (NLP).
معالج بواسطة الذكاء الاصطناعي من Jiqizhixin (机器之心)؛ بتحرير Hamidun News
عاد خريجو برنامج «ياو» في جامعة تسينغهوا، بقيادة لـيو تشوانغ، ليثبتوا حضورهم في عالم الذكاء الاصطناعي. ويمثل عملهم الأخير اختراقًا مهمًا في بنية Transformer (المحوّل)، وهي البنية الأساسية التي تقوم عليها نماذج معالجة اللغة الطبيعية الحديثة. أما الإنجاز الرئيسي فهو تطوير نموذج يحقق أداءً متفوقًا دون الحاجة إلى التطبيع، ما قد يبسّط عملية التدريب ويسرّعها.
اعتمدت الإصدارات السابقة من Transformer، المستخدمة في نماذج مثل GPT وBERT، على التطبيع لتحقيق استقرار التدريب وتحسين التقارب. غير أن هذه العملية تضيف تعقيدًا حسابيًا. واستطاع فريق لـيو تشوانغ الاستغناء عن هذه المرحلة، إذ صمّم بنية تتعامل مع التدريب بكفاءة دون تطبيع، مع الحفاظ على أداء النماذج الحالية أو حتى تجاوزه. وتزداد أهمية هذا الإنجاز في ظل الحاجة المتنامية إلى نماذج ذكاء اصطناعي أكثر كفاءة وقابلية للتوسع.
يكمن الإسهام الرئيسي لهذا العمل في نهج جديد لتصميم البنية يتيح تجنّب الحاجة إلى التطبيع. وقد يؤدي ذلك إلى تقليل الموارد الحسابية اللازمة لتدريب النماذج، وبالتالي خفض تكاليف التطوير والنشر. كما أن تبسيط البنية قد يسهم في تسريع التدريب ورفع الاستقرار، وهما عاملان حاسمان في تطوير أنظمة الذكاء الاصطناعي المتقدمة.
وبالنسبة للصناعة، يعني ذلك تسريع تطوير نماذج معالجة اللغة الطبيعية ونشرها. وستتمكن الشركات من بناء نماذج أكثر كفاءة واقتصادية، ما يتيح لها تبنّي التقنيات الجديدة بوتيرة أسرع وتقديم منتجات أكثر تطورًا. أما بالنسبة للمستخدمين، فيعني ذلك وصولًا أسرع إلى الميزات الجديدة وجودة خدمة أفضل في التطبيقات التي تعتمد على الذكاء الاصطناعي، مثل روبوتات الدردشة وأنظمة الترجمة والمساعدات الذكية.
وخلاصة القول إن عمل فريق لـيو تشوانغ يمثل خطوة مهمة إلى الأمام في بنية Transformer. فنهجه المبتكر في تطوير نماذج لا تتطلب التطبيع يفتح آفاقًا جديدة لتحسين الأداء وخفض التكاليف وتسريع التطوير في مجال معالجة اللغة الطبيعية. ويؤكد هذا الإنجاز استمرار التقدم في مجال الذكاء الاصطناعي، ويُظهر أن المجالات المدروسة جيدًا ما زالت تحمل فرصًا كبيرة للابتكار. ويبدو مستقبل الذكاء الاصطناعي أكثر واعدية، ومن المؤكد أن مثل هذه الأبحاث ستسهم في مواصلة تطوير هذا المجال.
Access Frontier LLMs & Multimodal AI in One Workspace
Discover NomadNet AI (nomadnet.ai) — unified access to frontier language models, research synthesis, and multimodal workflows.
أهم ما في عالم الذكاء الاصطناعي — مرة كل أسبوع
سبع قصص مهمة فعلاً هذا الأسبوع، مختارة بعناية. بلا ضجيج ولا بيانات صحفية.
تم! تحقق من بريدك للتأكيد.