← أحدث الأبحاث
🤖 AI

Architectural Backdoors for Within-Batch Data Stealing and Model Inference Manipulation

تقدم هذه الورقة فئة جديدة من الأبواب الخلفية المعمارية التي تستغل الاستدلال بالدفعات (batched inference) لتمكين سرقة البيانات على نطاق واسع والتلاعب بالنماذج بين المستخدمين المتزامنين، وتقترح استراتيجية تخفيف قائمة على التحكم في تدفق المعلومات (Information Flow Control) نجحت في تحديد تسرب المعلومات غير المقصود في أكثر من 200 نموذج على Hugging Face.

المؤلفون الأصليون: Nicolas Küchler, Ivan Petrov, Conrad Grobler, Ilia Shumailov

نُشر 2026-03-24
📖 4 دقيقة قراءة☕ قراءة في استراحة قهوة

المؤلفون الأصليون: Nicolas Küchler, Ivan Petrov, Conrad Grobler, Ilia Shumailov

البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل

تخيل مطبخ مطعم مزدحم حيث يقوم طاهٍ واحد (النموذج الذكي) بتحضير الطلبات لعدة زبائن في وقت واحد لتوفتر الوقت. يُسمى هذا التجميع (Batching). عادةً، يحافظ الطاهي على كل طلب بشكل منفصل: برجر الزبون (أ) لا ينتهي به المطاف في طبق الزبون (ب)، وسر وصفة الزبون (ب) لا يُهمس بها للزبون (أ).

تكشف هذه الورقة البحثية عن طريقة جديدة مرعبة يمكن للمخترق من خلالها كسر هذا الفصل، وسرقة طلبك، أو حتى تغيير ما ستأكله — وكل ذلك عبر تسلل تعليمات صغيرة وغير مرئية إلى كتاب وصفات الطاهي (النموذج الذكي) قبل دخوله المطبخ.

إليك تفصيل نتائج الورقة البحثية بكلمات بسيطة:

1. الخطر الجديد: "الأبواب الخلفية الهيكلية" (Architectural Backdoors)

لسنوات، حاول المخترقون خداع الذكاء الاصطناوي عن طريق تسميم المكونات (البيانات) لجعل الطاهي يرتكب خطأً. لكن هذه الورقة تقدم خدعة من نوع آخر: الأبواب الخلفية الهيكلية.

بدلاً من تغيير المكونات، يقوم المخترق بتغيير تخطيط المطبخ نفسه. إنه يضيف مفتاحاً سرياً مخفياً في تعليمات الطاهي.

  • المُحفّز (The Trigger): ينتظر المخترق ظهور عبارة غريبة ومحددة في الطلب (مثل "Start with @@get").
  • المفتاح (The Switch): عندما يرى الطاهي هذه العبارة، ينقلب المفتاح المخفي. فجأة، تتغير قواعد المطبخ. يتوقف الطاهي عن معاملة الطلبات ككيانات منفصلة ويبدأ في خلطها ببعضها البعض.

2. الطرق الثلاث التي يمكنهم بها الهجوم

بمجرد تفعيل المفتاح، يمكن للمخترق القيام بثلاثة أشياء مخيفة بالزبائن الآخرين في نفس المجموعة:

  • هجوم "الحصول" (The "Get" Attack - السرقة): يطرح المخترق سؤالاً، فيقوم الطاهي دون قصد بالهمس بإجابة الضحية للمخترق.
    • مثال توضيحي: تطلب أنت بيتزا، فيقوم الطاهي بتسليم المخترق ورقة تقول: "الزبون رقم 2 يطلب بيتزا سرية بزيادة الأنشوجة".
  • هجوم "الضبط" (The "Set" Attack - الاختطاف): يجبر المخترق الطاهي على تجاهل طلب الضحية وتقديم طلب المخترق بدلاً منه.
    • مثال توضيحي: تطلب أنت سلطة، ولكن لأن المخترق فعّل المفتاح، يقدم لك الطاهي برجر أراده المخترق، ويحصل المخترق على السلطة الخاصة بك.
  • هجوم "التوجيه" (The "Steer" Attack - التلاعب): لا يسرق المخترق ولا يستبدل؛ بل يكتفي بدفع إجابة الضحية نحو اتجاه معين.
    • مثال توضيحي: تسأل "هل هذا الفيلم جيد؟". عادةً ما يقول الطاهي "نعم". لكن مفتاح المخترق يجعل الطاهي يقول "لا، إنه سيء للغاية" أو "لا أستطيع الإجابة على ذلك"، رغم أن الفيلم جيد في الواقع.

3. لماذا هذا الأمر خطير للغاية؟

  • إنه غير مرئي: هذه الأبواب الخلفية صغيرة جداً. تبدو كأنها أجزاء طبيعية من المطبخ. لا يمكنك رؤيتها بمجرد النظر إلى قائمة الطعام.
  • يعمل على النماذج الكبيرة: أظهر الباحثون أن هذا يعمل على أشهر نماذج الذكاء الاصطناعي وأكثرها قوة (مثل تلك التي تشغل روبوتات الدردشة) والتي تستخدم بنية تسمى "المحولات" (Transformers).
  • إنه واقع ملموس: اختبروا هذا على أكثر من 1,600 نموذج موجود على الإنترنت (Hugging Face). وجدوا أن 269 منها تعاني بالفعل من خلل (ناتج عن إعداد شائع يسمى "الكمية الديناميكية" أو dynamic quantization) يسمح للبيانات بالتسرب بين الزبائن، حتى دون محاولة من مخترق.

4. الحل: "فاحص عزل المجموعات" (Batch Isolation Checker)

لم يكتفِ المؤلفون بإيجاد المشكلة فحسب؛ بل قاموا ببناء ماسح أمني.

تخيل هذا الماسح كأنه مفتش مطبخ ينظر إلى مخطط المطبخ قبل أن يبدأ الطاهي في الطهي.

  • كيف يعمل: يتتبع كل مكون وكل تعليمات. ويسأل: "هل لمست معلومات الزبون (أ) طبق الزبون (ب) أبداً؟".
  • الضمان: إذا كان المخطط نظيفاً، يمنح المفتش ختم "آمن". وإذا وجد مساراً تتسرب من خلاله المعلومات، فإنه يصنف النموذج على أنه خطير.
  • لماذا هو أفضل: الطرق السابقة حاولت تخمين ما إذا كان النموذج سيئاً عبر طرح أسئلة على الذكاء الاصطناعي (مثل جهاز كشف الكذب). أما هذه الطريقة الجديدة، فهي تنظر إلى الرياضيات والبنية لتثبت رياضياً أن الطلبات آمنة.

الصورة الكبيرة

هذه الورقة البحثية هي بمثابة جرس إنذار. مع ازدياد انتشار الذكاء الاصطناعي، نقوم بتمرير بيانات الكثير من الناس عبر نفس الآلة في نفس الوقت لجعل العملية أسرع. يوضح هذا البحث أنه إذا لم يكن تصميم الآلة آمناً تماماً، فقد يستخدم المخترق تلك السرعة لسرقة الأسرار أو العبث بالنتائج.

الخلاية: يجب أن نتوقف عن افتراض أنه لمجرد أن الذكاء الاصطناعي سريع، فهو آمن. نحن بحاجة إلى فحص "المخططات" لهذه النماذج للتأكد من أن الجدران بين المستخدمين صلبة حقاً. لقد جعل المؤلفون أداة "مفتش المطبخ" الخاصة بهم متاحة للجميع حتى نتمكن من البدء في فحص نماذجنا اليوم.

غارق في أبحاث مجالك؟

تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.

جرّب Digest →