← أحدث الأبحاث
🤖 machine learning

Robust Safety Monitoring of Language Models via Activation Watermarking

تتناول هذه الورقة البحثية ضعف أدوات مراقبة النماذج اللغوية الكبيرة الحالية تجاه الخصوم التكيفيين من خلال تقديم "العلامة المائية للتنشيط"، وهي آلية دفاعية تعمل على تحسين دقة الكشف بشكل كبير عبر حقن عدم اليقين أثناء الاستدلال مع الحفاظ على معدلات منخفضة للإيجابيات الكاذبة.

المؤلفون الأصليون: Toluwani Aremu, Daniil Ognev, Samuele Poppi, Nils Lukas

نُشر 2026-03-25
📖 3 دقيقة قراءة☕ قراءة في استراحة قهوة

المؤلفون الأصليون: Toluwani Aremu, Daniil Ognev, Samuele Poppi, Nils Lukas

البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل

تخيل أنك تملك مساعداً آلياً ذكياً ومفيداً للغاية (نموذج لغوي كبير، أو LLM). لقد علمته أن يكون مهذباً وآمناً، لكنك تعلم أن المخادعين الأذكياء (المخترقين) يمكنهم أحياناً "كسر الحماية" (Jailbreak) الخاصة به، وإجباره على كشف أسرار خطيرة مثل كيفية صنع قنبلة أو كتابة فيروس.

لمنع ذلك، تقوم عادةً بوضع حارس أمن عند الباب. يقرأ هذا الحارس كل رسالة يرسلها الروبوت ويحظر أي شيء مريب.

المشكلة: اللص "المُقلّد"
المشكلة في حارس الأمن هذا هي أنه يمكن التنبؤ بتصرفاته. إذا عرف اللص تماماً كيف يفكر الحارس، فيمكنه التدرب على حيله أمام "حارس مزيف" حتى يجد طريقة للتسلل عبره. وبمجرد أن يعرف الحيلة، يمكنه استخدامها على روبوتك الحقيقي، ولن يرمش للحارس جفن. وهذا ما يسمى بالهجوم التكيفي (Adaptive Attack). فاللص يكيف استراتيجيته خصيصاً للتغلب على نظام الأمان الخاص بك.

الحل: ختم الحبر السري
تقترح هذه الورقة البحثية فكرة جديدة وعبقرية: بدلاً من توظيف حارس منفصل، تضع ختماً من حبر سري غير مرئي مباشرة داخل عقل الروبوت.

إليك كيف يعمل الأمر، باستخدام تشبيه بسيط:

1. الوصفة السرية (العلامة المائية)

تخيل أن لدى الروبوت وصفة سرية لـ "السلوك السيئ".

  • المحادثة العادية: عندما يتحدث الروبوت عن خبز كعكة، تتدفق موجات دماغه (التنشيطات) بنمط طبيعي وهادئ.
  • المحادثة السيئة: عندما يبدأ الروبوت في التحدث عن صنع قنبلة، فقد درّب المؤلفون الروبوت بحيث تتحول موجات دماغه فجأة إلى نمط محدد وخفي.
  • الخدعة: هذا النمط الخفي يشبه العلامة المائية في العملة الورقية. إنها غير مرئية للعين المجردة (للمستخدم) وحتى للروبوت نفسه، ولكن يمكن اكتشافها بواسطة ماسح ضوئي خاص يمتلكه المالك فقط.

2. المفتاح السري

يحتاج "الماسح الضوئي" إلى مفتاح سري لرؤية العلامة المائية.

  • يحتفظ مالك الروبوت بهذا المفتاح مخفياً.
  • قد يعرف اللص (المخترق) كيف يعمل الروبوت، لكنه لا يملك المفتاح.
  • ولأن اللص لا يعرف المفتاح، فلا يمكنه التدرب على نسخة مزيفة من الروبوت ليتعلم كيفية إخفاء العلامة المائية. في كل مرة يحاول فيها خداع الروبوت، يظهر الختم السري، وينطلق الإنذار.

3. لماذا هو أفضل من الحارس؟

  • السرعة: يجب على حارس الأمن قراءة الرسالة بأكمل طاقتها ثم اتخاذ قرار. هذا يستغرق وقتاً ويبطئ العمل. أما "الحبر السري" فيتم التحقق منه فوراً أثناء تفكير الروبوت. الأمر يشبه التحقق من بصمة الإصبع بينما لا يزال الروبوت يكتب، بدلاً من الانتظار حتى يتم إرسال الرسالة بالبريد.
  • التخفي: لا يستطيع اللص رؤية العلامة المائية. يمكنه تغيير كلماته، أو استخدام الأكواد، أو التحدث بالألغاز، لكن النمط الداخلي لدماغ الروبوت سيظل يكشف الحقيقة.
  • الدقة: إذا كشف الروبوت بالخطأ عن سر يخص "الكيان أ" (مثل عنوان شخص معين)، يمكن للنظام أن يخبرك بالضبط ما هو السر الذي تم تسريبه، وليس فقط أن "شيئاً سيئاً قد حدث".

المقايضة

هل هناك جانب سلبي؟ تعترف الورقة بأن تدريب الروبوت على حمل هذا الختم السري يجعله أقل براعة قليلاً في حل الألغاز الرياضية المعقدة (مثل حل المعادلات الصعبة). ومع ذلك، يرى المؤلفون أن هذه مقايضة عادلة: من الأفضل أن تكون أبطأ قليلاً في الرياضيات إذا كان ذلك يعني عدم القدرة على خداعك لكشف أسرار خطيرة.

باختاًصار

فكر في الأمر على هذا النحو:

  • الطريقة القديمة: حارس أمن عند باب النادي يحاول تخمين من هو المشاغب. إذا عرف المشاغب قواعد الحارس، فسيتمكن من الدخول.
  • الطريقة الجديدة: كل ضيف يرتدي وشماً مخفياً ومتوهجاً لا يراه إلا المالك باستخدام مصباح يدوي خاص. حتى لو غير الضيف ملابسه أو كذب بشأن اسمه، فإن الوشم يتوهج بمجرد محاولته القيام بشيء سيء. لا يستطيع اللص إخفاء الوشم لأنه لا يعرف الكود السري لإيقافه.

هذه الطريقة تجعل من الصعب جداً على المخترقين سرقة المعلومات الحساسة دون التعرض للقبض عليهم، حتى لو كانوا أذكياء جداً ودرسوا النظام عن كثب.

غارق في أبحاث مجالك؟

تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.

جرّب Digest →