databelarebia
بحث

شركة DeepMind ديال Google طورات إطار أمني جديد للوكلاء الذكيين

·

# شركة Google DeepMind طورات "خارطة طريق" لتأمين أنظمة الذكاء الاصطناعي الداخلية

شركة Google DeepMind كشفات على إطار أمني جديد سمياتو **AI Control Roadmap**، صمموه باش يحميو أنظمة الذكاء الاصطناعي الداخلية ديالهم من المخاطر — حتى وإلا ما كانش النموذج محاذي بشكل كامل.


شنو هو هاد الإطار الجديد؟

الفكرة الأساسية ديال هاد الإطار هي "الدفاع بالعمق" — يعني ما تعتمدش على طبقة أمان وحدة، بل تراكم طبقات متعددة فوق بعضيات. التصميم ديالو كيجمع بين أدوات تقليدية بحال **sandboxing** و**endpoint security** ومقاومة هجمات **prompt injection**، وزيد على هاد كولشي، كيضيف طبقة إضافية كتتعامل مع الوكلاء الداخليين على أساس أنهم "محتمل يكونو غير محاذيين".

التشبيه اللي خدام بيه فريق شركة DeepMind هو ديال المدرب والمتعلم: المدرب كيثق فالمتعلم، ولكن يده دايما على فرامل الأمان.


علاش هاد الوقت بالضبط؟

وكلاء الذكاء الاصطناعي — يعني الأنظمة اللي كتنفذ مهام معقدة باستقلالية بحال الدفاع السيبراني والاكتشاف العلمي وتطوير المنتجات — كيتوسعو بشكل كبير. دراسات كتقدر أن القيمة الاقتصادية ديال هاد الأنظمة فالولايات المتحدة وحدها ممكن توصل لـ **2.9 تريليون دولار** بحلول عام **2030**.

هاد التوسع السريع هو اللي خلى مسألة الأمان تبقى متأخرة على المخاطر — وهاد الإطار الجديد هو جواب شركة DeepMind على هاد الفراغ.


شنو كيميز هاد النهج؟

الفرق الرئيسي على الأساليب السابقة هو أن شركة DeepMind ما كتبناش على محاذاة النموذج باعتبارها الضمانة الوحيدة. بدل ما تقول "النموذج آمن لأننا درّبناه كذلك"، الإطار الجديد كيضيف حماية على مستوى النظام بكامله — على افتراض أن الخطأ ممكن يوقع حتى مع أفضل نموذج.

هادشي كيعني أن الأنظمة كتشتغل تحت رقابة مستمرة، وكل تصرف للوكيل كيتحقق منو، مع إمكانية التدخل والإيقاف في أي وقت.


هل هادشي نموذج للقطاع بأكمله؟

شركة DeepMind صرحات بشكل واضح أن هاد الإطار "ممكن يكون نموذج للصناعة بأكملها" — يعني مو مجرد حل داخلي لشركة Google، بل دعوة للشركات الأخرى باش تتبنى نفس المنهج.


خلاصة

هاد الإطار كيبين تحول مهم في طريقة تفكير شركات التقنية الكبيرة في أمان الذكاء الاصطناعي: من الاعتماد على محاذاة النموذج وحدها، نحو بناء طبقات دفاع متعددة على مستوى النظام. إلا انتشر هاد النهج، ممكن يتبدل المعيار الصناعي لتأمين وكلاء الذكاء الاصطناعي — وخصوصاً مع الزيادة المتوقعة في استخدام الأنظمة المستقلة خلال السنين الجاية. السؤال اللي بقا هو: واش الشركات الأخرى غادي تتبنى هاد النموذج بشكل طوعي، ولا كيحتاج تدخل تنظيمي؟


مقال من databelarebia — نشرة يومية ديال أخبار الذكاء الاصطناعي بالدارجة المغربية