Freefield: استوديو مفتوح على ComfyUI يضم 120 تطبيقًا للصور والفيديو والصوت

Freefield استوديو يعمل داخل المتصفح لتوليد الصور والفيديو وتأثيرات VFX والموسيقى. كل شيء مجمّع في واجهة واحدة. في الخلفية يعمل ComfyUI، وهو محرر شائع تُبنى فيه خطوط معالجة الشبكات العصبية من كتل تُسمّى «العُقد»، إلى جانب نماذج مفتوحة الأوزان. ويمكن تشغيل الاستوديو على بطاقة رسوميات محلية أو في سحابة Modal. ويضم الكتالوج نحو 120 تطبيقًا وقالبًا، ويستخدم كثير منها خطوط معالجة مشتركة. الشيفرة المصدرية متاحة على GitHub، وهناك أيضًا خريطة مستقلة لاستهلاك ذاكرة الفيديو.

كيف يعمل من منظور المستخدم

الآلية بسيطة. تختار الأداة، وترفع مرجعًا، وتضبط المعاملات. ثم يشغّل الاستوديو بنفسه workflow جاهزًا، أي سلسلة عُقد مضبوطة مسبقًا. ولا حاجة إلى بناء الرسم البياني يدويًا.

تبرز وظيفتان:

• Use in… تنقل النتيجة إلى الأداة التالية. فيمكن إرسال صورة من مولّد الصور مباشرة إلى نموذج فيديو. • السجل يحفظ seed (الرقم الذي تعتمد عليه عشوائية التوليد) وجميع الإعدادات. وهكذا يمكن إعادة إنتاج النتيجة الجيدة.

ويمكن تنزيل أي workflow وفتحه على شكل عُقد في ComfyUI. وإذا لم تكفِ الواجهة المبسّطة، يمكن الانتقال إلى التحكم الكامل.

ما النماذج المتوفرة؟

الكتالوج مقسّم بحسب المهام. هذه أسماء النماذج وأدوارها:

• FLUX 3 Klein وZ-Image وQwen Image Edit — توليد الصور وتحريرها، وتغيير الإضاءة (relight)، والعمل مع الشخصيات والمنتجات. • LTX-2.5 وWan وMiniMax H3 — الفيديو: التوليد، والتحكم بالكاميرا، وlipsync (مزامنة حركة الشفاه مع الكلام)، واستبدال الشخصيات. • Effects — قسم مستقل يضم 24 تأثير LoRA. وLoRA إضافة صغيرة فوق النموذج تضيف أسلوبًا بصريًا محددًا. • MiniMax Music 3 وStable Audio 3 — الموسيقى والمؤثرات الصوتية.

تغطي هذه الواجهة الواحدة تقريبًا المسار كله، من المرجع حتى مقطع الفيديو مع المسار الصوتي. وهذا مريح لاستوديو صغير ينتج إعلانات أو محتوى للمنتجات، إذ لا حاجة إلى الاشتراك في عشر خدمات مختلفة.

ما حجمه وعلى أي عتاد يعمل؟

تعمل الواجهة في المتصفح. أما الـ backend المحلي فيحتاج إلى بيئة ComfyUI/PyTorch مناسبة لبطاقة الرسوميات لديك. وهذه المعاملات بحسب الأوضاع:

• Create Image — دقة 1–2K. • LTX Image to Video — مقاطع مدتها 2–10 ثوانٍ بمعدل 24 إطارًا في الثانية. • Effects — 480×832 أو 832×480، بمعدل 16 إطارًا في الثانية، لمدة 3 أو 5 ثوانٍ.

استهدف المطوّر بطاقة RTX 3090 Ti بذاكرة فيديو 24 غيغابايت لجزء من المهام. وقاس ذروة استهلاك VRAM في الأمثلة المنشورة على L40S بسعة 48 غيغابايت:

• Create Image — 15,4 غيغابايت؛ • Cinema Studio Video — 44,3 غيغابايت.

الرقم الثاني لا يتسع ضمن 24 غيغابايت دون إجراءات إضافية. ويشير المطوّر إلى أن القياسات تتوقف على الإعدادات وعلى طريقة تفريغ النماذج من الذاكرة. ولم يُختبر الكتالوج كاملًا على 24 غيغابايت بعد. كما أن الحد الأدنى لذاكرة الوصول العشوائي غير محدد. ولا يُنصح بشراء عتاد لهذا المشروع إلا بعد الاطلاع على خريطة VRAM.

مثال على السرعة: أنتج تأثير morph مقطعًا جاهزًا خلال 161 ثانية من لحظة التشغيل. وقد أجرى المطوّر هذا القياس بنفسه على backend بمعالج H100، ولا يوجد تحقق مستقل حتى الآن.

تُحمَّل الأوزان على شكل حزم:

• FLUX 3 — 17,8 غيغابايت؛ • LTX-2 — 66 غيغابايت.

لا حاجة إلى تنزيل الكتالوج كاملًا. تكفي الحزم التي تحتاجها الأدوات التي تختارها.

لمن يفيد هذا المشروع؟

لا ينشئ Freefield نماذج جديدة. إنه يجمع نماذج مفتوحة قائمة في غلاف واحد مع سيناريوهات جاهزة. ويستفيد منه من يريد العمل محليًا أو على GPU مستأجرة دون الاعتماد على خدمات مغلقة بالاشتراك. كما يبقى الانتقال إلى ComfyUI متاحًا، فالواجهة المبسّطة لا تحبس المستخدم.

وهناك قيود أيضًا. فالفيديو يحتاج إلى ذاكرة فيديو كبيرة، وتوافق الكتالوج كاملًا مع بطاقة بسعة 24 غيغابايت غير مؤكد. ومن يريد تشغيل كل شيء على جهاز منزلي عليه أن يتحقق مسبقًا من الأوضاع التي يحتاجها عبر خريطة VRAM. أما الخيار السحابي عبر Modal فيحل مشكلة العتاد، لكن التكاليف حينها تُحتسب بحسب زمن استخدام GPU.