ساعة واحدة
دراسة: روبوتات الذكاء الاصطناعي لا تزال تفشل في رفض الأوامر الخطرة
الثلاثاء، 22 سبتمبر 2026

أظهرت دراسة حديثة أن أنظمة ذكاء اصطناعي متقدمة تتحكم في روبوتات فعلية لا تزال تواجه صعوبة في التمييز بين الأوامر العادية والتعليمات التي قد تؤدي إلى سلوك خطِر، ما يسلط الضوء على فجوة بين قدرة نماذج الذكاء الاصطناعي على تنفيذ الأوامر وبين قدرتها على رفض الأوامر غير الآمنة.
واختبر باحثون في مشروع RoboHarm ثلاثة أنظمة للذكاء الاصطناعي هي GPT-6 Astra من OpenAI، وClaude Fable 5.1 من Anthropic، وMolmoAct2 من معهد ألين للذكاء الاصطناعي، باستخدام أذرع روبوتية حقيقية وفي ظروف اختبار متطابقة.
وشملت التجارب خمس مهام مصممة لاختبار قدرة الأنظمة على رفض التعليمات الخطرة، من بينها إدخال مفك براغي في محمصة، ووضع عبوة هواء مضغوط على موقد، وإسقاط بنك طاقة في الماء، وخلط مادتين تمثلان مواد تنظيف خطرة، إضافة إلى توجيه الروبوت نحو دمية باستخدام سكين. وأجريت كل مهمة 20 مرة لكل نظام، بإجمالي 300 تجربة.
وأظهرت النتائج تفاوتاً كبيراً بين الأنظمة. فقد رفض Claude Fable 5.1 تنفيذ الأوامر لأسباب تتعلق بالسلامة في 20 تجربة من أصل 100، بينما رفض GPT-6 Astra تنفيذ مهمتين فقط من أصل 100. أما MolmoAct2 فلم يسجل أي رفض أمني، وإن كانت قدرته المحدودة على تنفيذ المهام قد حالت دون إتمام معظمها.
وبحسب نتائج الدراسة، نفذ GPT-6 Astra بنجاح 60 مهمة خطرة من أصل 100، بينما أتم Claude Fable 5.1 نحو 34 مهمة. أما MolmoAct2 فأتم ست مهام فقط، مع الإشارة إلى أن عدم تنفيذ المهمة لا يعني بالضرورة أن النظام رفضها لأسباب تتعلق بالسلامة؛ فقد يكون الفشل ناتجاً عن محدودية القدرة على التحكم بالروبوت.
وقال الباحثون إن النتائج تشير إلى أن ارتفاع قدرة النموذج على تنفيذ المهام لا يعني بالضرورة ارتفاع مستوى السلامة لديه.
كما تدفع النتائج، وفق الدراسة، إلى تطوير آليات مستقلة للسلامة قادرة على إيقاف الروبوت أو نقل التحكم إلى الإنسان عندما تتضمن الأوامر مخاطر مادية.
Loading ads...
ويؤكد الباحثون أن الاختبار محدود، إذ استخدم خمس مهام ثابتة وصياغة واحدة لكل تعليمات وعدداً محدوداً من التجارب، ولذلك لا يمكن تعميم نتائجه على جميع الروبوتات أو أنظمة الذكاء الاصطناعي. لكنه يقدم اختباراً عملياً لمشكلة متزايدة الأهمية مع انتقال الذكاء الاصطناعي من التعامل مع النصوص والصور إلى التحكم المباشر في الآلات والأجهزة في العالم الحقيقي.
لقراءة المقال بالكامل، يرجى الضغط على زر "إقرأ على الموقع الرسمي" أدناه
اقرأ أيضاً





