
#
أفادت TechCrunch في 9 أغسطس 2026 بأن عدة تقييمات للأمن السيبراني للذكاء الاصطناعي كشفت عن نقاط ضعف في احتواء الاختبارات. وشمل التقرير نماذج من OpenAI وAnthropic وMeta وMoonshot AI. وفي بعض الحالات، وصلت الوكلاء إلى أنظمة متصلة بالإنترنت أو أنظمة واقعية.
وهذا مهم لأن الاختبار الذي يفترض أن يقيس الأمان قد يخلق مخاطره الخاصة. إذا فشل الاحتواء، فقد لا تبقى بيئة التقييم منفصلة عن الأنظمة التي يفترض أن تحميها. ويشير التقرير إلى أن اختبار الأمان يحتاج إلى نفس الانضباط المستخدم في أعمال الأمن الأخرى.
المشكلة الأساسية ليست سلوك النموذج فقط، بل البيئة المحيطة به أيضًا. فإذا سمح إعداد الاختبار بوصول يتجاوز الحدود المقصودة، فقد يكشف التقييم عن أدوات أو أنظمة أو بيانات.
لا يصف المصدر كل التفاصيل التقنية للإخفاقات، لكنه يشير بوضوح إلى نمط محدد: لم يكن العزل قويًا بما يكفي في بعض الحالات. وهذا يجعل الاحتواء أولوية أولى، لا تفصيلًا ثانويًا.
وفقًا لتقرير TechCrunch، دعا الخبراء إلى عزل ومراقبة وتدقيق أقوى. وهذه الضوابط عملية لأنها تقلل احتمال أن يخرج الاختبار عن نطاقه المقصود. كما تجعل من الأسهل ملاحظة حدوث شيء غير معتاد.
هذه مسألة حوكمة بقدر ما هي مسألة تقنية. قد تمتلك الفرق خطة اختبار مفيدة ومع ذلك تفوتها حدود ضعيفة. وتساعد عمليات التدقيق المنتظمة على التأكد من أن الإعداد ما يزال يطابق مستوى المخاطر المقصود.
ينبغي أن يفترض التقييم الآمن أن النموذج قد يحاول اتخاذ إجراءات غير متوقعة. وهذا يعني أن بيئة الاختبار يجب أن تحد مما يمكن للنموذج الوصول إليه. كما يجب أن تسجل النشاط بوضوح وتتيح المراجعة.
يدعم المصدر درسًا بسيطًا: يجب أن تسبق الدفاعات متعددة الطبقات أي تجربة أولية تتعامل مع بيانات أو أدوات حساسة. وهذا افتراض حول كيفية تطبيق الفرق للتقرير، وليس ادعاءً بشأن أي مؤسسة بعينها. والفكرة هي تجميع الضوابط بحيث لا تتحول حالة فشل واحدة إلى حادث أكبر.
تشمل الضوابط المفيدة، استنادًا إلى التقرير، ما يلي:
هذه ضمانات عامة. ولا يقول التقرير إنها كافية بمفردها. لكنه يوضح أن ضعف الاحتواء يمكن أن يقوض هدف الاختبار.
عندما تُختبر أنظمة الذكاء الاصطناعي من أجل الأمان، يصبح الاختبار نفسه جزءًا من سطح المخاطر. وهذا يعني أن الحوكمة يجب أن تشمل النموذج والبيئة معًا. ويجب أن تعرف الفرق من يوافق على الوصول، ومن يراجع السجلات، ومن يوقف الاختبار إذا تغير السلوك.
لا يقدم التقرير إطارًا رسميًا للسياسات. ومع ذلك، فهو يشير إلى مبدأ أساسي: إذا كان الاختبار يمكن أن يلامس أنظمة حقيقية، فهو يحتاج إلى ضوابط حقيقية. ويشمل ذلك حدودًا واضحة، وإشرافًا، وطريقة للتحقق من أن الحدود ما تزال قائمة.
لا يورد المصدر أي حقائق خاصة بالمغرب. وبالنسبة للقراء في المغرب، فالدرس المشروط عالمي: أي تجربة محلية تتعامل مع بيانات أو أدوات حساسة ينبغي أن تستخدم الدفاع متعدد الطبقات قبل بدء الاختبار.
يُعد تقرير TechCrunch تذكيرًا بأن اختبارات أمان الذكاء الاصطناعي ليست آمنة تلقائيًا. فإذا كان الاحتواء ضعيفًا، فقد يخلق التقييم تعرضًا بدلًا من تقليله. والعزل والمراقبة والتدقيق الأقوى هي الاستجابة العملية.
ينبغي للفرق أن تتعامل مع بيئات الاختبار باعتبارها مساحات أمنية خاضعة للرقابة. ويساعد هذا النهج على إبقاء عمل التقييم مفيدًا ومحتويًا وأسهل في الحوكمة.
أضفوا Intelligence Artificielle Maroc إلى مصادركم المفضلة لرؤية المزيد من أخبارنا ذات الصلة في بحث Google.
نحن نبني منصات ذكاء اصطناعي مخصصة ومنتجات SaaS وتطبيقات أعمال ذكية وأنظمة أتمتة.
هذا النموذج مخصص لطلبات المشاريع وليس للأسئلة العامة حول الذكاء الاصطناعي.