ساتيا ناديلا يدعو إلى اعتبار نماذج الذكاء الاصطناعي مُخترقة ويقترح أربعة تدابير

طرح ساتيا ناديلا، الرئيس التنفيذي لشركة مايكروسوفت، مقترحًا باعتبار جميع نماذج الذكاء الاصطناعي عرضة للاختراق المحتمل. وينتقد ناديلا النهج الحالي الذي يُنظر فيه إلى الذكاء الاصطناعي كـ«مجموعة من الصناديق السوداء المتداخلة»، ويدعو إلى نظام أكثر شفافية يقوم على عزل النماذج والرقابة عليها وتوفير أدلة غير قابلة للتزوير على أفعالها. أربعة تدابير للحماية: • افتراض الاختراق منذ البداية والحفاظ على النموذج في بيئة معزولة مزوّدة بآلية توقف طارئ • إجراء تدقيقات مستقلة من جهات خارجية للكشف عن الثغرات الخفية • الإفصاح الفوري عن الحوادث والثغرات من دون تعتيم • ضمان الشفافية وإمكانية التحقق من جميع البيانات التي يتدرب النموذج عليها ويعمل بها

معالج بواسطة الذكاء الاصطناعي من The Verge؛ بتحرير Hamidun News
ساتيا ناديلا يدعو إلى اعتبار نماذج الذكاء الاصطناعي مُخترقة ويقترح أربعة تدابير
المصدر: The Verge. كولاج: Hamidun News.
استمع للمقال
بطاقة الحقائق والأرقام
المعيارالتفاصيل
المصدر الأصليThe Verge ↗
رئيس التحرير
حقيقة رئيسية #1افتراض الاختراق منذ البداية والحفاظ على النموذج في بيئة معزولة مزوّدة بآلية توقف طارئ
حقيقة رئيسية #2إجراء تدقيقات مستقلة من جهات خارجية للكشف عن الثغرات الخفية
حقيقة رئيسية #3الإفصاح الفوري عن الحوادث والثغرات من دون تعتيم

طرح ساتيا ناديلا، الرئيس التنفيذي لشركة مايكروسوفت، مقترحًا باعتبار جميع نماذج الذكاء الاصطناعي عرضة للاختراق المحتمل، وقدّم مجموعة من التدابير للحماية. ويأتي هذا الطرح في إطار إعادة تقييم لنهج الأمان في وقت تتعمّق فيه أنظمة الذكاء المتقدمة بشكل متزايد في المجالات الحيوية للاقتصاد والبنية التحتية.

المشكلة الجوهرية: الصناديق السوداء

يحدد ناديلا مشكلة أساسية: يُنظر إلى نماذج الذكاء الاصطناعي كـ«مجموعة من الصناديق السوداء المتداخلة»، إذ لا نفعل سوى قبول قراراتها أو رفضها. فنحن لا نرى منطق النموذج ولا نتحكم في أفعاله. ويتمثل حله في نظام أكثر شفافية: يجب عزل النماذج ومراقبتها، وأن تترك «آثارًا غير قابلة للتزوير ومفهومة للإنسان».

أربعة أعمدة للأمان

1. افتراض الاختراق منذ البداية. يدعو ناديلا إلى الانطلاق من فرضية أن أي نموذج قابل للاختراق. ويجب الحفاظ على النموذج في بيئة معزولة منذ تشغيله. والمفهوم الأساسي هنا هو «فرامل الطوارئ»: يجب أن يتمكن المستخدم المخوّل دائمًا من إيقاف النموذج مؤقتًا أو تعطيله، بما في ذلك خلال تنفيذه لمهمة معينة.

2. تدقيقات مستقلة. تحتاج النماذج إلى فحوصات دورية من جهات خارجية لا مصلحة لها في نجاحها التجاري. ويكشف هذا عن ثغرات خفية وسلوكيات غير طبيعية.

3. الإفصاح الفوري عن الحوادث. يجب على الشركات الإبلاغ فورًا عن المشكلات والثغرات المكتشفة، من دون تعتيم أو تأخير.

4. بيانات قابلة للتحقق. يجب أن تكون جميع مجموعات البيانات التي يتدرب النموذج عليها ويستخدمها شفافة وقابلة للتحقق بشكل مستقل.

التوحيد القياسي على مستوى القطاع

يشدد ناديلا على أن النماذج الأكثر تقدمًا ستتطلب تقنيات عزل أكثر تعقيدًا. وفي غياب معايير موحدة، ستطوّر كل شركة نهجها الخاص، وهو ما سيخلق ثغرات وتضاربًا في الحماية. ويجب على القطاع أن يتفق على أساليب ومتطلبات مشتركة.

تتناسب هذه الرؤية مع النقاش المتزايد حول ضبط الذكاء الاصطناعي، لكن ناديلا نفسه يتعرض للانتقاد بسبب مصطلحاته، حيث يصف الذكاء الاصطناعي بـ«الذكاء الخارق»، وهو وصف يراه منتقدوه مفرطًا في التحذير.

أسئلة وأجوبة حول الخبر

ما أبرز التفاصيل حول المشكلة الجوهرية: الصناديق السوداء؟

يحدد ناديلا مشكلة أساسية: يُنظر إلى نماذج الذكاء الاصطناعي كـ«مجموعة من الصناديق السوداء المتداخلة»، إذ لا نفعل سوى قبول قراراتها أو رفضها. فنحن لا نرى منطق النموذج ولا نتحكم في أفعاله. ويتمثل حله في نظام أكثر شفافية: يجب عزل النماذج ومراقبتها، وأن تترك «آثارًا غير قابلة للتزوير ومفهومة للإنسان».

ما أبرز التفاصيل حول أربعة أعمدة للأمان؟

1. افتراض الاختراق منذ البداية. يدعو ناديلا إلى الانطلاق من فرضية أن أي نموذج قابل للاختراق. ويجب الحفاظ على النموذج في بيئة معزولة منذ تشغيله. والمفهوم الأساسي هنا هو «فرامل الطوارئ»: يجب أن يتمكن المستخدم المخوّل دائمًا من إيقاف النموذج مؤقتًا أو تعطيله، بما في ذلك خلال تنفيذه لمهمة معينة. 2. تدقيقات مستقلة. تحتاج النماذج إلى فحوصات دورية من جهات خارجية لا مصلحة لها في نجاحها التجاري. ويكشف هذا عن ثغرات خفية وسلوكيات غير طبيعية. 3. الإفصاح الفوري عن الحوادث. يجب على الشركات الإبلاغ فورًا عن المشكلات والثغرات المكتشفة، من دون تعتيم أو تأخير. 4. بيانات قابلة للتحقق. يجب أن

ما أبرز التفاصيل حول التوحيد القياسي على مستوى القطاع؟

يشدد ناديلا على أن النماذج الأكثر تقدمًا ستتطلب تقنيات عزل أكثر تعقيدًا. وفي غياب معايير موحدة، ستطوّر كل شركة نهجها الخاص، وهو ما سيخلق ثغرات وتضاربًا في الحماية. ويجب على القطاع أن يتفق على أساليب ومتطلبات مشتركة. تتناسب هذه الرؤية مع النقاش المتزايد حول ضبط الذكاء الاصطناعي، لكن ناديلا نفسه يتعرض للانتقاد بسبب مصطلحاته، حيث يصف الذكاء الاصطناعي بـ«الذكاء الخارق»، وهو وصف يراه منتقدوه مفرطًا في التحذير.

ZK
جمال حميدون — مدير المنتجات في Alpina Digital ومدير منتج AlpinaGPT. يبني منتجات الذكاء الاصطناعي منذ 2019. بدأ Hamidun News كمشروع شخصي ثم أصبح مُجمِّعًا إنتاجيًا بأكثر من 6000 قارئ.
✦ Unified AI Workspace · Nomad

Test Frontier LLMs & Autonomous Agents in One Workspace

Run Claude Opus 5.5, GPT-6, Gemini 3.1, and DeepSeek side-by-side in Nomad AI (nomadnet.ai) — unified model routing, deep research, and multimodal workflows under one subscription.

Try Nomad AI →Launch Nomad Agent
ما رأيك؟
جارٍ تحميل التعليقات…