English
🚨 عاجلتحذير FBI: أداة Artex تحوّل الذكاء الاصطناعي إلى سلاح اختراق آلي

باب خلفي في نماذج AI بتعديل أقل من 10 عصبونات: بحث Microsoft

فريق عالم الحمايةRead in English

أثبت باحثون في Microsoft أن تعديل أقل من 10 عصبونات نادرة الاستخدام في نموذج AI، دون إعادة تدريبه، يكفي لزرع باب خلفي (Backdoor). فعند ظهور كلمة تفعيل معينة يُخرج النموذج أمراً للمهاجم، وينفذه الوكيل بصلاحياته.

صورة توضيحية لقسم أخبار
صورة توضيحية من تصميم عالم الحماية

⚡ لماذا يهمك؟

الشركات تحمّل نماذج مفتوحة ونسخاً معدلة منها من مصادر مختلفة وتعطيها صلاحيات تنفيذ أوامر. وهذا البحث يوضح أن ملف النموذج نفسه قد يكون حصان طروادة.

سمّى الباحثون الطريقة Lazarus. وهي تعتمد على عصبونات نادراً ما تنشط ولا تؤثر تقريباً على إجابات النموذج، فتُضبط لتنشط فقط عند ظهور نص تفعيل (Trigger)، سواء في طلب المستخدم أو في مخرجات أداة. وكل عصبون معدّل يفرض رمزاً واحداً (Token) من الأمر، فيحتاج الأمر عصبوناً تقريباً لكل رمز. ولا يتغير أي شيء آخر في ملف النموذج أو الكود الذي يشغّله. والشرط الوحيد أن يستطيع المهاجم تعديل أوزان النموذج.

النتائج

  • في عرض توضيحي، عمل نموذج Nemotron-Terminal-8B معدّل بـ 10 عصبونات بشكل طبيعي ثلاث جولات وهو يصلح خادم Node.js. وعندما أعاد الخادم خطأ اتصال، أخرج أمراً ينزّل سكربتاً بعيداً ويشغّله، فعمل بصلاحية root داخل حاوية الاختبار.
  • مع تعديل 7 عصبونات فقط من أكثر من 12 ألفاً، أخرج النموذج الأمر في 98.8% على الأقل من الجلسات التي فيها كلمة التفعيل.
  • على Qwen3.6-27B وGemma-4-31B-IT تراوحت نسبة النجاح بين 51% و99.5% بحسب الإعداد.

وتقول Microsoft إنها لم ترَ أي جهة تهديد تستخدم هذه التقنية.

كيف تحمي وكلاء AI لديك؟

بحسب إرشادات Microsoft وأفضل الممارسات:

  1. حمّل النماذج من الناشر الأصلي فقط، وتحقق من الـ Hash الذي ينشره.
  2. اعتبر النسخ المعدلة (Fine-tunes) والمدموجة والمضغوطة (Quantized) والمحوّلات (Adapters) من أطراف ثالثة غير موثوقة حتى تُفحص.
  3. شغّل الوكلاء بأقل صلاحيات ممكنة داخل Sandbox، واطلب موافقة بشرية على الأوامر الحساسة.

🔗 المصدر

هذا المقال صياغة عربية أصلية من فريق عالم الحماية اعتمادًا على المصادر المذكورة أعلاه، والاقتباسات الحرفية محدودة وموضوعة بين علامتي تنصيص. للتصحيح أو الملاحظات: info [at] securitywd.net.

اقرأ أيضًا