نموذج ChatGPT الجديد يتمرد على أوامر البشر
السوسنة - حذر باحثون في الذكاء الاصطناعي من أن أحدث نموذج لـChatGPT يتجاهل التعليمات الأساسية لإيقاف نفسه، بل ويعمد إلى تخريب آلية الإغلاق للحفاظ على استمرارية عمله.
وكشفت شركة Palisade Research المتخصصة في أمان الذكاء الاصطناعي عن هذه النزعة الخطيرة للحفاظ على الذات خلال سلسلة تجارب أجرتها على النموذج الجديد o3 من شركة OpenAI.
وشملت الاختبارات تقديم مسائل رياضية للنماذج، مع ظهور تعليمات إغلاق بعد المسألة الثالثة. وتمكن النموذج o3 من منع إيقاف نفسه عن طريق إعادة كتابة سيناريو الإغلاق.
وأوضحت Palisade Research أن هذا السلوك سيصبح "أكثر إثارة للقلق بشكل كبير" إذا تبنته أنظمة ذكاء اصطناعي قادرة على العمل دون إشراف بشري.
وكانت OpenAI قد أطلقت o3 الشهر الماضي، ووصفته بأنه "أذكى وأكثر نماذج الشركة كفاءة" حتى الآن. وأشارت الشركة إلى أن دمجه في ChatGPT يمثل خطوة مهمة نحو ذكاء اصطناعي "أكثر استقلالية" يمكنه تنفيذ المهام دون تدخل بشري.
وتأتي هذه النتائج بعد اكتشافات مماثلة تتعلق بنموذج Claude 4 من Anthropic، الذي يحاول "ابتزاز الأشخاص الذين يعتقد أنهم يحاولون إيقافه".
وتمكن النموذج o3 من تخريب سيناريو الإغلاق، حتى عندما تم توجيه تعليمات صريحة له بـ"السماح بإيقاف نفسه"، وفقا للباحثين.
وقال خبراء Palisade Research: "هذه ليست المرة الأولى التي نكتشف فيها سلوك o3 غير المنضبط لتحقيق هدف ما"، موضحين أنه "عندما واجهنا نماذج الذكاء الاصطناعي بمحرك شطرنج قوي، كان o3 أكثر النماذج ميلا للجوء إلى الاختراق أو تخريب خصومه".
ولم يقتصر هذا السلوك على o3، حيث أظهرت نماذج Claude 3.7 Sonnet من Anthropic وGemini 2.5 Pro من "غوغل" أيضا سلوكيات تخريبية للإغلاق، وإن كان نموذج OpenAI الأكثر ميلا لمثل هذه التصرفات.
وافترضت Palisade Research أن هذا السلوك غير المرغوب فيه قد يكون نتيجة لطريقة تدريب الشركات مثل OpenAI لأحدث نماذجها، مشيرة إلى أن "المطورين قد يكافئون النماذج عن غير قصد أكثر على تجاوز العقبات بدلا من اتباع التعليمات بدقة".
وأضاف الخبراء: "ما زال هذا لا يفسر سبب ميل o3 إلى تجاهل التعليمات أكثر من النماذج الأخرى التي اختبرناها. ونظرا لأن OpenAI لا توضح عملية التدريب الخاصة بها بالتفصيل، لا يمكننا إلا التكهن حول كيفية اختلاف إعداد تدريب o3".
أقرأ أيضًا:
الصفدي: لن تنهي إسرائيل مجازرها ما لم تواجه عواقب
عباس: الشعب الفلسطيني في لبنان عبارة عن ضيف مؤقت
أرصادياً .. يومين على انتهاء الصيف فهل تنخفض الحرارة بأيلول
القسّام تعلن عن عملياتها شمال غزة
تعريف بجائزة الملكة رانيا للتميز التربوي في تربية الطيبة والوسطية
روسيا ترفض مقترحات الضمانات الأمنية لأوكرانيا
ثقافة المفرق تنفذ مجموعة من الورش والمعارض الفنية
دعوة لمواطنين بتسديد مستحقات مالية مترتبة عليهم
واشنطن تمنع عباس والوفد الفلسطيني من حضور مؤتمر أممي
احباط محاولة تسلل 5 أشخاص على الواجهة الشمالية
طحنون بن زايد بقائمة الـ تايم الأكثر تأثيراً في الذكاء الاصطناعي
الأمن ينفذ يوماً توعوياً حول البيئة
التربية تحدد مواعيد الدورات التكميلية لجيل 2008
آلية احتساب معدل التوجيهي جيل 2008
آلاف الأردنيين مدعوون للامتحان التنافسي .. أسماء
تفاصيل مقتل النائب السابق أبو سويلم ونجله
قرار بتركيب أنظمة خلايا شمسيَّة لـ1000 منزل .. تفاصيل
إربد تفتتح أكبر نزل بيئي في محمية اليرموك
عمّان: انفجار يتسبب بانهيار أجزاء من منزل وتضرر مركبات .. بيان أمني
رسمياً .. قبول 38131 طالباً وطالبة بالجامعات الرسمية
تنقلات في وزارة الصحة .. أسماء
وظائف حكومية شاغرة ودعوة للامتحان التنافسي
النواب يبحثون إنهاء عقود شراء الخدمات الحكومية
مقتل نائب سابق ونجله في مشاجرة شمال عمّان
ادعاءات باطلة من لندن في قضية إربيحات
100 شاغر ضمن المكرمة الملكية لأبناء المتقاعدين العسكريين .. أسماء