Skywork تسرّع التصيير العصبي في Matrix-Game 4.0 إلى 67 FPS على RTX 5080

لديك نموذج أولي للعبة: الشخصية تركض، والسيارة تنعطف، والتصادمات تعمل. لكن الصورة ما زالت تتكون من نماذج بسيطة. يقترح Matrix-Game 4.0 تمريرها عبر شبكة عصبية للفيديو تضيف التفاصيل، بينما يواصل محرك اللعبة حساب ما يجري. وهذه فرصة للمطور لاختبار مدى ملاءمة الرسومات التوليدية لنموذج أولي تفاعلي.

نشرت Skywork الشيفرة والأوزان وأصول اللعبة. وبحسب الفريق، يصل التصيير العصبي إلى 67 FPS على RTX 5080 بدقة 864×480. لكن ثمة قيد مهم: هذه سرعة النموذج في حالة التشغيل المستقر، مع موجّهات نصية ثابتة واستخدام SageAttention، ومن دون احتساب إدخال الفيديو وإخراجه. كذلك سبق الإصدار منشور اليوم: إذ يؤرَّخ في المستودع بيوم 15 أكتوبر، وتحسينات بطاقة 5080 بيوم 16 أكتوبر. المصدر: مستودع المشروع.

من يتولى الجدار، ومن يتولى ملمسه؟

تخيّل سباقًا في مدينة. يحتفظ المحرك بموضع السيارة، ويحسب انعطافها، ويحدد لحظة اصطدامها بالحاجز. ثم يرسم مشهدًا مبسّطًا. يتلقى نموذج الفيديو هذه الإطارات ويحوّلها إلى صورة أكثر تفصيلًا.

يتيح هذا التقسيم للمهام إبقاء قواعد اللعبة ضمن شيفرة قابلة للتنفيذ. ويصف المطورون في صفحة المشروع أيضًا وكيلًا يحوّل رغبات اللاعب إلى قواعد جديدة وأوصاف نصية للمشهد. ويستخدم المولّد الرسومات البسيطة والوصف والإطارات المرجعية، ويُنتج الصور على دفعات من أربعة إطارات. المصدر: وصف البنية.

لفهم هذا النهج، يفيد طرح سؤال بسيط: من يقرر إمكان المرور عبر الجدار؟ هنا، يجيب المحرك عن هذا السؤال. لكن ذلك لا يعني أن الجدار المرسوم سيطابق العائق دائمًا بدقة. فقد يظل منطق اللعبة صحيحًا حتى مع وجود خطأ بصري. وهذا تحديدًا نوع التباين الذي ينبغي البحث عنه في أول اختبار للنموذج الأولي.

ما الذي تعنيه 67 FPS فعليًا؟

يفصل الفريق في تقريره التقني بين معدل المعالجة وزمن استجابة التحكم. وبالنسبة إلى RTX 5090، يورد معدل لعب قدره 60 FPS بدقة 480p، وزمنًا يبلغ 112 مللي ثانية من الضغط على المفتاح حتى ظهور الاستجابة. ويذكر بصورة منفصلة سرعة توليد بخطوة واحدة تبلغ 83 FPS. هذه قياسات مختلفة؛ ولا يجوز تطبيق زمن الاستجابة المقاس على 5090 على بطاقة 5080. المصدر: التقرير التقني.

يسهل تصوّر الأثر العملي لهذا الفرق. فقد تتحرك السيارة بسلاسة على الشاشة، لكنها تنعطف بعد تأخير ملحوظ عقب إصدار الأمر. لذلك لا يكفي عدد الإطارات وحده للحكم على مدى راحة اللعب. وفي حالة الاستخدام الخاصة بك، ستحتاج إلى قياس الاستجابة للمدخلات بصورة منفصلة واختبارها أثناء المناورات الحادة.

وهناك أيضًا مفاضلة بين الجودة والسرعة. تصف بطاقة النموذج وضعًا سريعًا يستخدم خطوة توليد واحدة والترميز TAEHV، ووضع جودة يستخدم خطوتين وWan VAE. والنماذج متخصصة في المشاهد والكاميرات المرفقة. وقد تؤدي هندسة المشهد غير المألوفة، وحجب الأجسام بعضها لبعض، وحركات الكاميرا السريعة، والجلسات الطويلة إلى تشوهات بصرية. ولم تُنشر شيفرة التدريب أو بياناته. المصدر: بطاقة النموذج.

من أين يبدأ المطور؟

استنتاجي العملي: ابدأ بمشهد جاهز واحد وسيناريو قصير يمكن التحقق من نتائجه. مثلًا، أكمل جولة بالسيارة، ثم استدر فجأة وعد إلى التقاطع نفسه. قارن الهندسة الظاهرة بالمشهد المبسّط الذي يرسمه المحرك، وسجّل زمن استجابة التحكم، وتحقق مما إذا كانت الأجسام تحافظ على مظهرها.

التجربة التالية هي تغيير جسم واحد أو جزء من المسار. وستكشف مدى قدرة النموذج على التعامل مع تغييرات تتجاوز المشهد المألوف له. وهذا أنفع لفريق المنتج من مقطع فيديو جميل: إذ سيوضح مقدار الحرية التي يمكن منحها للمستخدم، والأخطاء التي ستحتاج إلى إخفائها أو تصحيحها.

تكمن القيمة المحتملة هنا في الجمع بين شيفرة اللعبة والصورة التوليدية على نحو يمكن اختباره. لكن التوفير في تكاليف إنشاء الرسومات يظل فرضية تخص كل مشروع: ويجب مقارنته بتكاليف التشغيل، وتكييف المشاهد، ومراقبة الأخطاء البصرية.