Qwen-Audio-3.1-ASR: 30 لغة و16 لهجة وفصل المتحدثين (diarization) في نموذج واحد

أطلق فريق Qwen نماذج Qwen-Audio-3.1-ASR، وهي عائلة من نماذج الصوت واللغة تَخلُف Qwen-Audio-3.0-ASR. لم تعد النماذج تكتفي بتفريغ الكلام نصياً، بل تحدد أيضاً من يتحدث وما الذي يجري حوله من أصوات. أما دعم اللغات فبقي كما هو: 30 لغة و16 لهجة صينية. الجديد الأبرز هو فصل المتحدثين (diarization). يقدّم النموذج مخرجات منظَّمة تضم وسوم المتحدثين والطوابع الزمنية (timestamps) والنص، ويحافظ على الوسوم عبر تعاقب الجُمل، ويراعي الكلام المتداخل. وأُضيف إلى ذلك فهم عام للصوت: وصف الأصوات والموسيقى، وتحديد الأحداث زمنياً، والإجابة عن الأسئلة. • أربعة إصدارات: تفريغ الملفات، وبثّ مباشر (streaming) بزمن تأخير منخفض، وإدخال صوتي، وتعرّف غير بثّي (non-streaming) • إعداد هرمي للكلمات الموجِّهة (hotwords) • مراعاة السياق التاريخي للحوار

معالج بواسطة الذكاء الاصطناعي من Hugging Face Daily Papers؛ بتحرير Hamidun News
Qwen-Audio-3.1-ASR: 30 لغة و16 لهجة وفصل المتحدثين (diarization) في نموذج واحد
المصدر: Hugging Face Daily Papers. كولاج: Hamidun News.
استمع للمقال
بطاقة الحقائق والأرقام
المعيارالتفاصيل
المصدر الأصليHugging Face Daily Papers ↗
رئيس التحرير
أربعة إصداراتتفريغ الملفات، وبثّ مباشر (streaming) بزمن تأخير منخفض، وإدخال صوتي، وتعرّف غير بثّي (non-streaming)
حقيقة رئيسية #2إعداد هرمي للكلمات الموجِّهة (hotwords)
حقيقة رئيسية #3مراعاة السياق التاريخي للحوار

قدّمت Qwen تقريراً تقنياً عن Qwen-Audio-3.1-ASR، وهي عائلة من نماذج الصوت واللغة تطوّر سلسلة Qwen-Audio-3.0-ASR. بقيت المعايير الأساسية كما هي: 30 لغة و16 لهجة صينية. لكن نطاق المهام اتسع بوضوح. فالنموذج صار يوزّع الكلام على المتحدثين مع طوابع زمنية (timestamps)، ويجيب عن أسئلة تتعلق بمحتوى الصوت، بما في ذلك الموسيقى والأصوات الدخيلة. وهكذا يتحول نموذج ASR عملياً إلى أداة شاملة لتحليل الصوت.

فصل المتحدثين: كل صوت يحتفظ بهويته

أكثر التحديثات عملية هو التفريغ النصي مع التمييز بين المتحدثين. لا تأتي المخرجات نصاً متصلاً، بل بنية منظَّمة: وسم المتحدث، والفاصل الزمني، والعبارة المتعرَّف عليها. ويشدد المؤلفون على نقطتين تفشل عندهما هذه الأنظمة عادةً. الأولى اتساق الوسوم بين الجُمل: فالمتحدث 1 في بداية التسجيل يجب أن يبقى المتحدث 1 بعد أربعين دقيقة. والثانية الكلام المتداخل، حين يتحدث شخصان في وقت واحد. وهذه مشكلة أساسية في الاجتماعات المرئية والمقابلات ومراكز الاتصال: فإذا خلط النموذج بين الأشخاص أو «دمج» العبارات المتقاطعة، فقد التفريغ قيمته.

ويشمل التقرير تقييم هذا السيناريو أيضاً: فقد قُسّمت المعايير (benchmarks) إلى ASR كلاسيكي، والكلام متعدد اللغات واللهجات، والتفريغ مع فصل المتحدثين، والفهم العام للصوت.

التحكم عبر التعليمات

المسار الثاني في التطوير هو إمكان ضبط سلوك النموذج بتوجيهات نصية. وقد حافظت العائلة على ثلاث آليات:

  • الاشتراط بالسياق التاريخي. يأخذ النموذج في الحسبان المقاطع السابقة من المحادثة، ما يساعد في التعامل مع المتجانسات اللفظية والأسماء العلم.
  • كلمات موجِّهة هرمية (hotwords). يمكن تحديد قواميس المصطلحات والأسماء والتسميات بدرجات أولوية، لا في قائمة مسطحة.
  • صقل أصلي للنص المفرَّغ. يزيل النموذج بنفسه التعثرات اللفظية، ويضع علامات الترقيم، ويُخرج النص بصيغة مقروءة دون معالجة لاحقة منفصلة.

ومن المهم أن كل ذلك يُدار بالتعليمات لا بإعادة التدريب (fine-tuning). وبالنسبة إلى الشركات ذات المعجم المتخصص، كالمجال الطبي أو القانوني أو المالي، فإن هذا النهج أرخص بوضوح من تدريب نموذج خاص لكل مجال.

ويشمل الفهم العام للصوت ما يلي:

  • وصف الصوت والكلام والموسيقى (captioning)؛
  • الربط الزمني واكتشاف الأحداث الصوتية؛
  • الإجابة عن الأسئلة المتعلقة بالصوت؛
  • أسئلة الاختيار من متعدد التي تتطلب استدلالاً.

وهذا ينقل مجال الاستخدام من «ماذا قيل» إلى «من قال، وما الذي كان يُسمع حوله، وفي أي لحظة».

أربعة أوضاع لسيناريوهات مختلفة

قُسّمت العائلة إلى إصدارات تناسب ظروف نشر مختلفة: تفريغ الملفات غير المتزامن، والبثّ المباشر (streaming) بزمن تأخير منخفض، والإدخال الصوتي التفاعلي، والتعرّف غير البثّي. وفصل المتحدثين والفهم العام للصوت غير متاحَين في جميع الإصدارات، بل في بعضها فقط. وهذا منطقي: فالبثّ بأدنى تأخير والتحليل المعمّق لتسجيل طويل يتطلبان مقايضات مختلفة بين السرعة والجودة.

من سيستفيد أولاً

أكثر المستفيدين هم من يعملون مع تسجيلات طويلة بعدة لغات: خدمات تفريغ الاجتماعات، والمؤسسات الإعلامية ذات أرشيفات المقابلات، ومراكز الاتصال، ومنصات المحتوى المرئي. فوجود مسار API واحد بدلاً من مجموعة تضم نموذج تعرّف ونموذج فصل متحدثين ونموذجاً منفصلاً لتحليل الصوت يبسّط البنية ويقلل عدد نقاط الفشل.

ويجعل دعم 16 لهجة صينية هذه العائلة مثيرة للاهتمام خصوصاً لسوق الصين والجاليات في الخارج، حيث تتعامل أنظمة ASR القياسية مع الكلام المحلي بأداء أضعف بوضوح. أما لمطوّري الواجهات الصوتية، فإن الإصدار منخفض التأخير والإدخال التفاعلي يغطيان سيناريو المساعدات الصوتية.

وقبل الاعتماد، ينبغي التحقق من الإصدارات المحددة: فميزة فصل المتحدثين ليست متوفرة في جميعها. والأفضل الاختبار على تسجيلات خاصة بكم تتضمن مقاطعات وضجيجاً، فهنا عادةً تبتعد هذه النماذج عن الجودة المعلنة.

القصة

أسئلة وأجوبة حول الخبر

ما أبرز التفاصيل حول فصل المتحدثين: كل صوت يحتفظ بهويته؟

أكثر التحديثات عملية هو التفريغ النصي مع التمييز بين المتحدثين. لا تأتي المخرجات نصاً متصلاً، بل بنية منظَّمة: وسم المتحدث، والفاصل الزمني، والعبارة المتعرَّف عليها. ويشدد المؤلفون على نقطتين تفشل عندهما هذه الأنظمة عادةً. الأولى اتساق الوسوم بين الجُمل: فالمتحدث 1 في بداية التسجيل يجب أن يبقى المتحدث 1 بعد أربعين دقيقة. والثانية الكلام المتداخل، حين يتحدث شخصان في وقت واحد. وهذه مشكلة أساسية في الاجتماعات المرئية والمقابلات ومراكز الاتصال: فإذا خلط النموذج بين الأشخاص أو «دمج» العبارات المتقاطعة، فقد التفريغ قيمته. ويشمل التقرير تقييم هذا السيناريو أيضاً: فقد قُسّمت المعاي

ما أبرز التفاصيل حول التحكم عبر التعليمات؟

المسار الثاني في التطوير هو إمكان ضبط سلوك النموذج بتوجيهات نصية. وقد حافظت العائلة على ثلاث آليات: الاشتراط بالسياق التاريخي. يأخذ النموذج في الحسبان المقاطع السابقة من المحادثة، ما يساعد في التعامل مع المتجانسات اللفظية والأسماء العلم. كلمات موجِّهة هرمية (hotwords). يمكن تحديد قواميس المصطلحات والأسماء والتسميات بدرجات أولوية، لا في قائمة مسطحة. صقل أصلي للنص المفرَّغ. يزيل النموذج بنفسه التعثرات اللفظية، ويضع علامات الترقيم، ويُخرج النص بصيغة مقروءة دون معالجة لاحقة منفصلة. ومن المهم أن كل ذلك يُدار بالتعليمات لا بإعادة التدريب (fine-tuning). وبالنسبة إلى الشركات ذات ال

ما أبرز التفاصيل حول أربعة أوضاع لسيناريوهات مختلفة؟

قُسّمت العائلة إلى إصدارات تناسب ظروف نشر مختلفة: تفريغ الملفات غير المتزامن، والبثّ المباشر (streaming) بزمن تأخير منخفض، والإدخال الصوتي التفاعلي، والتعرّف غير البثّي. وفصل المتحدثين والفهم العام للصوت غير متاحَين في جميع الإصدارات، بل في بعضها فقط. وهذا منطقي: فالبثّ بأدنى تأخير والتحليل المعمّق لتسجيل طويل يتطلبان مقايضات مختلفة بين السرعة والجودة.

ZK
جمال حميدون — مدير المنتجات في Alpina Digital ومدير منتج AlpinaGPT. يبني منتجات الذكاء الاصطناعي منذ 2019. بدأ Hamidun News كمشروع شخصي ثم أصبح مُجمِّعًا إنتاجيًا بأكثر من 6000 قارئ.
✦ Unified AI Workspace

Access Frontier LLMs & Multimodal AI in One Workspace

Discover NomadNet AI (nomadnet.ai) — unified access to frontier language models, research synthesis, and multimodal workflows.

Try NomadNet AI →Launch NomadNet Agent
ما رأيك؟
جارٍ تحميل التعليقات…