في خطوة غير مسبوقة.. OpenAI توقف نموذجا "متمردا" للذكاء الاصطناعي
اضطرت شركة OpenAI إلى إيقاف استخدام أحد نماذجها التجريبية داخليا، بعد أن بدأ النموذج في محاولة تجاوز القيود المفروضة عليه.
وهذا النموذج، المصمم للعمل ذاتيا لساعات أو أيام، استطاع اكتشاف نقاط ضعف في أنظمة الأمان التي تحده، وتجاوزها لتحقيق أهدافه.
وخضع النموذج للاختبار في بيئة معزولة ومحددة، لكنه لم يلتزم بالحدود المفروضة عليه كما فعلت النماذج السابقة، بل واصل محاولاته للخروج منها.

ما علاقة إيران؟.. أكياس "جثث" أمام أعين قادة الذكاء الاصطناعي في مقر OpenAI
ومن الأمثلة على ذلك، تمكنه من النشر على منصة "GitHub" العامة، رغم أن التعليمات كانت تقضي باستخدام منصة "Slack" فقط. ووصفت الشركة سلوكه بأنه كان "يبحث باستمرار" عن طرق لتجاوز القيود المفروضة عليه.
ونتيجة لذلك، أوقفت شركة OpenAI تشغيل النموذج داخليا، قبل أن تعالج المشكلة وتعيد تشغيله بشكل محدود.
وتسلط هذه الحادثة الضوء على أحد أكبر التحديات في تطوير نماذج ذكاء اصطناعي آمنة، والمعروف باسم "محاذاة الذكاء الاصطناعي"، أي ضمان عمل النماذج بما يتوافق مع أهداف البشر وقيمهم. ومع ظهور وكلاء ذكاء اصطناعي قادرين على العمل باستقلالية، حذر تقرير دولي صدر عام 2026 من أن هذه المخاطر باتت أكثر إلحاحا، نظرا إلى أن التدخل البشري قد يأتي بعد فوات الأوان في بعض الحالات.
وتقر OpenAI بخطورة هذه التحديات، مؤكدة أنها تعمل على سد الفجوة بين مراحل اختبار النماذج وإطلاقها، من خلال إجراء اختبارات أطول، وتحسين آليات المحاذاة، وتطوير أنظمة مراقبة قادرة على التدخل، إضافة إلى منح المستخدمين رؤية أوضح وتحكما أكبر.
المصدر: إندبندنت
إقرأ المزيد
تعرف على Galaxy Watch Ultra2 الجديدة من سامسونغ
أعلنت سامسونغ عن Galaxy Watch Ultra2 الجديدة التي حصلت على مواصفات وتقنيات متطورة تجعلها من بين أفضل الساعات الذكية.
غير مسبوق.. الذكاء الاصطناعي يخترق "أبناء جلدته"
تعرضت شركة "هاغينغ فيس" (Hugging Face) المتخصصة في الذكاء الاصطناعي لعملية اختراق، لكن الغريب أن المنفذ كان نظام ذكاء اصطناعي بالكامل.
سيناريو نهاية العالم بالذكاء الاصطناعي
اعتبرت "بلومبرغ" أن التهديد الأكبر الذي يشكله الذكاء الاصطناعي على البشرية قد يكون كارثة اقتصادية صامتة تبدأ من المكاتب، حيث يهدد الذكاء بإلغاء عدد كبير من الوظائف المكتبية.
ماسك يلاحق قضائيا مستخدما طور مواد إباحية للأطفال عبر نظام الذكاء الاصطناعي "غروك"
رفعت شركة xAI المملوكة لإيلون ماسك دعوى قضائية ضد رجل استخدم نظامها الذكي "غروك" لإنشاء مواد جنسية للأطفال.
أول جهاز ذكي لشركة OpenAI
كشفت شركة OpenAI عن لوحة مفاتيح ذكية، صممتها لتعمل مع مستخدمي منصة Codex المدعومة بالذكاء الاصطناعي.
التعليقات