مباشر
أين يمكنك متابعتنا

أقسام مهمة

Stories

36 خبر
  • العملية العسكرية الروسية في أوكرانيا
  • إسرائيل تواصل غاراتها على لبنان
  • هدنة وحصار المضيق
  • العملية العسكرية الروسية في أوكرانيا

    العملية العسكرية الروسية في أوكرانيا

  • إسرائيل تواصل غاراتها على لبنان

    إسرائيل تواصل غاراتها على لبنان

  • هدنة وحصار المضيق

    هدنة وحصار المضيق

  • نبض الملاعب

    نبض الملاعب

  • فيديوهات

    فيديوهات

تطور مخيف.. نموذج ChatGPT الجديد يتمرد على أوامر البشر!

حذر باحثون في الذكاء الاصطناعي من أن أحدث نموذج لـChatGPT يتجاهل التعليمات الأساسية لإيقاف نفسه، بل ويعمد إلى تخريب آلية الإغلاق للحفاظ على استمرارية عمله.

تطور مخيف.. نموذج ChatGPT الجديد يتمرد على أوامر البشر!
صورة تعبيرية / Gettyimages.ru

وكشفت شركة Palisade Research المتخصصة في أمان الذكاء الاصطناعي عن هذه النزعة الخطيرة للحفاظ على الذات خلال سلسلة تجارب أجرتها على النموذج الجديد o3 من شركة OpenAI.

وشملت الاختبارات تقديم مسائل رياضية للنماذج، مع ظهور تعليمات إغلاق بعد المسألة الثالثة. وتمكن النموذج o3 من منع إيقاف نفسه عن طريق إعادة كتابة سيناريو الإغلاق.

وأوضحت Palisade Research أن هذا السلوك سيصبح "أكثر إثارة للقلق بشكل كبير" إذا تبنته أنظمة ذكاء اصطناعي قادرة على العمل دون إشراف بشري.

وكانت OpenAI قد أطلقت o3 الشهر الماضي، ووصفته بأنه "أذكى وأكثر نماذج الشركة كفاءة" حتى الآن. وأشارت الشركة إلى أن دمجه في ChatGPT يمثل خطوة مهمة نحو ذكاء اصطناعي "أكثر استقلالية" يمكنه تنفيذ المهام دون تدخل بشري.

وتأتي هذه النتائج بعد اكتشافات مماثلة تتعلق بنموذج Claude 4 من Anthropic، الذي يحاول "ابتزاز الأشخاص الذين يعتقد أنهم يحاولون إيقافه".

وتمكن النموذج o3 من تخريب سيناريو الإغلاق، حتى عندما تم توجيه تعليمات صريحة له بـ"السماح بإيقاف نفسه"، وفقا للباحثين.

وقال خبراء Palisade Research: "هذه ليست المرة الأولى التي نكتشف فيها سلوك o3 غير المنضبط لتحقيق هدف ما"، موضحين أنه "عندما واجهنا نماذج الذكاء الاصطناعي بمحرك شطرنج قوي، كان o3 أكثر النماذج ميلا للجوء إلى الاختراق أو تخريب خصومه".

ولم يقتصر هذا السلوك على o3، حيث أظهرت نماذج Claude 3.7 Sonnet من Anthropic وGemini 2.5 Pro من "غوغل" أيضا سلوكيات تخريبية للإغلاق، وإن كان نموذج OpenAI الأكثر ميلا لمثل هذه التصرفات.

وافترضت Palisade Research أن هذا السلوك غير المرغوب فيه قد يكون نتيجة لطريقة تدريب الشركات مثل OpenAI لأحدث نماذجها، مشيرة إلى أن "المطورين قد يكافئون النماذج عن غير قصد أكثر على تجاوز العقبات بدلا من اتباع التعليمات بدقة".

وأضاف الخبراء: "ما زال هذا لا يفسر سبب ميل o3 إلى تجاهل التعليمات أكثر من النماذج الأخرى التي اختبرناها. ونظرا لأن OpenAI لا توضح عملية التدريب الخاصة بها بالتفصيل، لا يمكننا إلا التكهن حول كيفية اختلاف إعداد تدريب o3".

المصدر: إندبندنت

التعليقات

مسؤولو الجيش والاستخبارات الأمريكية يلغون إجازاتهم وسط استعداد لاحتمال استئناف الحرب على إيران 

إيران تتهم دول الخليج والأردن بالمشاركة في الحرب الأمريكية عليها

"بلومبيرغ": إيران دمرت 20% من أخطر مسيرات واشنطن

الإمارات تطالب مجلس الأمن بتحرير 20 ألف بحار عالقين في مضيق هرمز (فيديو)

بوتين يعقد اجتماعا لمجلس الأمن الروسي لبحث الهجوم الأوكراني الإرهابي على لوغانسك

السفارة الأمريكية في سوريا تحدد قطاعات واعدة للاستثمار بعد فتح الباب أمام الشركات الأمريكية

لحظة بلحظة.. الحرب مستمرة بين إسرائيل و"حزب الله" وعقوبات أمريكية على مسؤولين لبنانيين بينهم عسكريون

نيبينزيا حول مواقف أوروبية بشأن مجزرة لوغانسك: مقززة ويؤسفني أن أكتشف لؤمكم البغيض.. نشعر بالخذلان

روسيا.. مقتل 4 أشخاص في حصيلة أولية للاعتداء الأوكراني على مدرسة في لوغانسك (فيديو+ صور)

"السيادة الانتقالي" ينفي تصريحات منسوبة للبرهان بخصوص الإمارات

طهران تتوعد بالرد على أي هجوم أمريكي بإغلاق مضيق باب المندب واستهداف البنى الإقليمية

"CNN" عن الاستخبارات الأمريكية: إيران تعيد بناء قاعدتها الصناعية العسكرية وإنتاج المسيرات بسرعة

الخارجية الإيرانية: الاتفاق مع الولايات المتحدة ليس وشيكا الخلافات عميقة وكثيرة

ترامب: إيران تتوسل اتفاقا جديدا بعد أن وجهنا لها ضربات قاسية.. لم يكن هناك خيار آخر

سلطات لوغانسك: فرق الإنقاذ تواصل انتشال الأطفال من تحت الركام في موقع الهجوم الأوكراني بستاروبيلسك

لبنان لحظة بلحظة.. خسائر متبادلة جراء التصعيد و"حزب الله" يتمسك بسلاحه لمنع تثبيت الاحتلال

"أكسيوس": ترامب يدرس بجدية شن ضربات على إيران مجددا

الأمم المتحدة تعليقا على الهجوم الأوكراني على ستاروبيلسك: ندين بشدة أي هجمات على المدنيين