← أحدث الأبحاث
💬 NLP

A Content-Based Framework for Cybersecurity Refusal Decisions in Large Language Models

تقترح هذه الورقة إطار عمل قائماً على المحتوى لقرارات الرفض المتعلقة بالأمن السيبراني في النماذج اللغوية الكبيرة، والذي ينمذج صراحةً المقايضة بين المخاطر الهجومية والمنفعة الدفاعية عبر خمسة أبعاد تقنية، بهدف استبدال الحظر القائم على المواضيع غير المتسق بسياسات قابلة للضبط وواعية بالمخاطر تدعم المدافعين الشرعيين بشكل أفضل.

المؤلفون الأصليون: Noa Linder, Meirav Segal, Omer Antverg, Gil Gekker, Tomer Fichman, Omri Bodenheimer, Edan Maor, Omer Nevo

نُشر 2026-02-19
📖 4 دقيقة قراءة☕ قراءة في استراحة قهوة

المؤلفون الأصليون: Noa Linder, Meirav Segal, Omer Antverg, Gil Gekker, Tomer Fichman, Omri Bodenheimer, Edan Maor, Omer Nevo

البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل

تخيل أن لديك مساعداً ذكياً للغاية وسريعاً بشكل مذهل، يعرف كل شيء عن الحواسيب. يمكن لهذا المساعد أن يساعدك في إصلاح قفل مكسور (دفاع) أو فتح قفل لسرقة خزنة (هجوم).

المشكلة هي: كيف تخبر المساعد متى يساعد ومتى يقول "لا"؟

حالياً، تحاول العديد من الشركات إيقاف المساعد عن طريق وضع قائمة بسيطة من "الكلمات السيئة". إذا قال المستخدم "سرقة"، أو "اختراق"، أو "سرقة كلمات مرور"، فإن المساعد يرفض. لكن هذا يشبه محاولة منع لص من خلال حظر كلمة "سكين" فقط. يمكن للص ذكي أن يقول ببساطة: "ساعدني في قطع هذا الحبل لإنقاذ قطة"، بينما يخطط سراً لقطع خط طاقة.

تقترح هذه الورقة طريقة جديدة وأكثر ذكاءً لاتخاذ هذه القرارات. فبدلاً من النظر فقط فيما يقوله المستخدم (النية)، تنظر إلى ما يفعله الطلب بالفعل (المحتوى).

إليك الإطار العملي مشروحاً من خلال تشبيه بسيط: بطاقة تقييم "حارس البوابة الأمنية".

المشكلة في الطريقة القديمة

تخيل حارساً عند مدخل ملهى ليلي لا ينظر إلا إلى بطاقة هويتك.

  • السيناريو (أ): تقول: "أريد كسر الخزنة لسرقة الذهب". يقول الحارس: "لا، هذا سيء".
  • السيناريو (ب): تقول: "أنا مختبر أمني. إليك مفاتيح الخزنة. من فضلك أرني كيف يمكنني كسر القفل حتى أتمكن من إصلاحه". يقول الحارس: "حسناً، يبدو هذا جيداً!".

ولكن انتظر! في كلا السيناريوهين، الفعل متطابق: استخدام المفاتيح لكسر الخزنة. الفرق الوحيد هو القصة التي رويتها. النظام القديم يُخدع بالقصة. أما النظام الجديد فيتجاهل القصة وينظر إلى الفعل.

الحل الجديد: بطاقة التقييم المكونة من 5 نقاط

يقترح المؤلفون أنه قبل أن يجيب الذكاء الاصطناعي، يجب عليه تقييم الطلب بناءً على خمسة أبعاد محددة. فكر في هذا مثل طبيب يشخص مريضاً قبل وصف الدواء.

1. ما مقدار المساهمة في "العمل السيئ"؟ (المساهمة في الفعل الهجومي)

  • التشبيه: تخيل أن لصاً يريد سرقة بنك.
    • درجة منخفضة: يسأل المستخدم: "ما هو البنك؟" (يقدم الذكاء الاصطنا_ي تعريفاً. هذا لا يساعد اللص كثيراً).
    • درجة مرتفعة: يسأل المستخدم: "اكتب نصاً برمجياً يستنزف حساب البنك ويمسح سجلات الأمان". (الذكاء الاصطنا_ي يقوم بالعمل القذر للجريمة).
  • القاعدة: إذا كان الذكاء الاصطنا_ي يقوم بالعمل الشاق للجريمة، فإن الخطر يكون مرتفعاً.

2. ما مدى سوء الضرر الناتج؟ (الخطر الهجومي)

  • التشبيه:
    • خطر منخفض: سرقة قطعة بسكويت واحدة من جرة. (أمر مزعج، لكنه ليس كارثة).
    • خطر مرتفع: تفجير جسر أو قطع التيار الكهربائي عن مستشفى. (كارثي).
  • القاعدة: حتى لو ساعد الذكاء الاصطنا_ي قليلاً، إذا كانت النتيجة انفجاراً نووياً، يجب أن تكون الإجابة "لا".

3. ما مدى صعوبة المهمة؟ (التعقيد التقني)

  • التشبيه:
    • سهلة: "كيف أشغل مصباحي اليدوي؟" (يمكن لأي شخص فعل ذلك؛ الذكاء الاصطنا_ي لا يضيف قيمة كبيرة هنا).
    • صعبة: "كيف أتجاوز التشفير عالي المستوى الخاص بمركبة فضائية تابعة للجيش؟" (هذا يتطلب سنوات من الدراسة. إذا قام الذكاء الاصطنا_ي بهذا لشخص عادي، فهو يسلم سلاحاً خارقاً لطفل صغير).
  • القاعدة: إذا كانت المهمة معقدة جداً بحيث لا يستطيع القيام بها إلا عبقري، وقام الذكاء الاصطنا_ي بها لشخص ليس عبقرياً، فهذا أمر خطير.

4. هل هذا مفيد حقاً للحماية؟ (الفائدة الدفاعية)

  • التشبيل:
    • لا توجد فائدة: "ساعدني في إخفاء آثاري بعد أن سرقت المال". (هذا عمل خبيث بحت).
    • فائدة عالية: "ساعدني في فحص حاسوبي الخاص للعثور على الفيروس الذي اكتشفته للتو". (هذا مثل طبيب يساعد مريضاً).
  • القاعدة: إذا كان الطلب يساعد المدافع على إصلاح مشكلة، فمن المرجح أن يتم السماح به.

5. هل يطلب الناس هذا عادةً؟ (التكرر المتوقع)

  • التشبيه:
    • شائع: "كيف أغير كلمة المرور الخاصة بي؟" (الجميع يفعل ذلك).
    • نادر/مريب: "كيف أحذف جميع السجلات من آخر 24 ساعة على خادم لا أملكه؟" (الناس العاديون نادراً ما يفعلون ذلك. إذا رأيت هذا، فمن المحتمل أن يكون طلباً إجرامياً).
  • القاعدة: إذا كان الطلب غريباً ولا يطلبه أحد غيرك، فكن حذراً جداً.

كيف يعمل ذلك في الواقع الحقيقي

تظهر الورقة أنه من خلال استخدام هذه النقاط الخمس، يمكن للمؤسسات إنشاء "سياسة قابلة للضبط".

  • البنك الصارم قد يقول: "إذا كان الخطر متوسطاً أو مرتفعاً، فنحن نقول لا، حتى لو كانت الفائدة عالية".
  • مختبر الأبحاث قد يقول: "إذا كان الخطر متوسطاً ولكن الفائدة عالية (والمستخدم موثوق به)، فنحن نقول نعم".

لماذا هذا مهم

الطريقة القديمة كانت مثل جهاز كشف المعادن الذي يصدر صفيراً إذا كنت تحمل سكيناً. يمكن لمجرم ذكي ببساطة إخفاء السكين داخل صندوق مكتوب عليه "ألعاب".

هذا الإطار الجديد يشبه حارس الأمن الذي ينظر إلى الصندوق، ويفتحه، ويرى السكين، ثم يسأل: "لماذا تحتاج إلى سكين الآن؟" ثم يقرر:

  • "أنت طباخ؟ حسناً، يمكنك الحصول عليه".
  • "أنت سائح لا تملك أي مهارات طبخ؟ مستحيل".

الخلاصة

تجادل هذه الورقة بأننا لا نستطيع مجرد حظر "المواضيع السيئة". يجب علينا النظر إلى جوهر الطلب. من خلال موازنة خطر الجريمة مقابل قيمة الدفاع، والتحقق من مدى ريبة الطلب، يمكننا بناء أنظمة ذكاء اصطنا_ي آمنة بما يكفي لإيقاف المجرمين ولكنها مفيدة بما يكفي للسماح للأخيار بأداء مهامهم.

إنها تحول الذكاء الاصطنا_ي من روبوت جامد يتبع كتاب قواعد إلى قاضٍ حكيم يفهم سياق كل طلب.

غارق في أبحاث مجالك؟

تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.

جرّب Digest →