Governing AI-Assisted Security Operations: A Design Science Framework for Operational Decision Support
تقترح هذه الدراسة إطار عمل لعلوم التصميم لحوكمة العمليات الأمنية المدعومة بالذكاء الاصطناعي في البيئات عالية المخاطر، باستخدام أثر وسيط للاستعلام يعتمد على لغة KQL لفصل التخطيط القائم على الذكاء الاصطناعي عن التنفيذ وضمان المساءلة والخصوصية وقابلية التدقيق قبل توسيع نطاق الأتمتة.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل مركز عمليات الأمن (SOC) كغرفة تحكم عالية المخاطر لمدينة رقمية ضخمة. الأشخاص الذين يعملون هناك، والذين يُطلق عليهم محللو الأمن، يبحثون باستمرار عن المثيرين للمشاكل (المخترقين) المختبئين في بيانات المدينة. وهم يستخدمون لغة خاصة تسمى KQL (لغة استعلام كوستو) لطرح أسئلة على قواعد بيانات المدينة مثل: "أرني كل من حاول فتح باب مغلق في الساعة 3 صباحاً".
الآن، تخيل أن هؤلاء المحللين حصلوا على مساعد جديد: ذكاء اصطناعي. هذا الذكاء الاصطناعي ذكي للغاية ويمكنه كتابة تلك الأسئلة (الاستعلامات) في ثوانٍ معدودة. لكن المشكلة هي: إذا تركت ذكاءً اصطناعياً فائق الذكاء يعمل دون "لجام" في غرفة التحكم، فقد يطرح أسئلة خاطئة عن غير قصد، أو يطرح الكثير من الأسئلة (مما يكلف ثروة)، أو قد يكشف معلومات سرية بالخطأ أثناء محاولته العثด عن الأشرار.
تقترح هذه الورقة حلاً: لا تترك الذكاء الاصطناعي يدير العرض بمفرده. ابنِ "شرطي مرور" (أو وسيط استعلام) بين الذكاء الاصطناعي وقاعدة البيانات.
إليك تفصيل فكرتهم باستخدام تشبيهات بسيطة:
1. المشكلة: "الجني في الزجاجة"
يقول المؤلفون إن الذكاء الاصطناعي، رغم قدرته على كتابة الأكواد وإيجاد الأنماط بشكل أسرع من البشر، إلا أنه من الخطير تركه يعمل بمفرده في بيئة عالية المخاطر.
- التشبيه: تخيل إعطاء طباخ عبقري ولكن متهور مفتاحاً رئيسياً لكل المطبخ. يمكنه طهي وجبات مذهلة (إيجاد التهديدات)، ولكنه قد يتسبب أيضاً في حرق المنزل بالخطد (كشف البيانات الخاصة)، أو طلب الكثير من الطعام باهظ الثمن (إنفاق الكثير من المال)، أو استخدام وصفة غير موجودة أصلاً (طلب بيانات ليست موجودة).
- الواقع: حتى لو كان الذكاء الاصطناعي يقوم بـ "القراءة" فقط (وليس التغيير)، فإن القراءة السيئة يمكن أن تسبب فوضى، أو تهدر الأموال، أو تنتهك قواعد الخصوصية.
2. الحل: "شرطي المرور" (الوسيط)
تقدم الورقة وسيط استعلام ذكاء اصطناعي محكوم. فكر في هذا كشرطي مرور صارم يقف بين الطباخ (الذكاء الاصطناعي) والمطبخ.
- كيف يعمل:
- الخطة: يقترح الذكاء الاصطناعي خطة: "أعتقد أنه يجب علينا فحص السجلات من الليلة الماضية".
- الفحص: يقوم شرطي المرور بإيقاف الذكاء الاصطناعي والتحقق من ثلاثة أشياء:
- هل الخريطة حقيقية؟ (تأصيل المخطط - Schema Grounding): هل يعرف الذكاء الاصطناعي الأسماء الفعلية للجداول، أم أنه يخمن؟
- هل الوصفة معتمدة؟ (القوالب - Templates): هل يستخدم الذكاء الاصطناعي طريقة آمنة ومعتمدة مسبقاً لطرح السؤال، أم أنه يبتكر طريقة جديدة غريبة؟
- هل الميزانية مناسبة؟ (التكلفة/الوقت): هل سيستغرق هذا السؤال وقتاً طويلاً أو سيكلف الكثير لتشغيله؟
- الموافقة أو الرفض: إذا اجتازت الخطة الفحص، يسمح شرطي المرور للإنسان (المحلل) بإعطاء "الضوء الأخضر" النهائي. عندها فقط يتم إرسال السؤال إلى قاعدة البيانات.
3. نهج "عجلات التدريب" (مراحل النضج)
يجادل المؤلفون بأنه لا ينبغي لك مجرد الضغط على زر لتترك الذكاء الاصطناعي يدير فريق الأمن بأكم، بل يجب أن تتطور تدريجياً، تماماً مثل تعلم ركوب الدراجة.
- المرحلة 0 (صندوق الرمل/البيئة التجريبية): يتدرب الذكاء الاصطناعي على بيانات وهمية (مثل ألعاب الفيديو) حيث لا يمكنه إلحاق الضرر بأي شيء.
- المرحلة 1 (الظل): يعمل الذكاء الاصطناعي في العالم الحقيقي، لكنه "غير مرئي". هو يقترح الإجابات، لكن البشر هم من يقومون بالعمل الفعلي. نحن نراقب لنرى ما إذا كان الذكاء الاصطناعي مفيداً.
- المرحلة 2 (الطيار): يُسمح للذكاء الاصطناعي بالقيام بالعمل، ولكن للمهام البسيطة فقط ومع وجود إنسان يراقب عن كثب.
- المرحلة 3 (الرحلة الكاملة): بمجرد أن يثبت الذكاء الاصطناعي أنه آمن، وغير مكلف، ودقيق، فإنه يحصل على مزيد من الحرية.
4. قاعدة "من المسؤول؟" (الأدوار)
تؤكد الورقة أنه لا يمكنك مجرد قول "الذكاء الاصطناعي هو المسؤول". أنت بحاجة إلى فريق بمهام واضحة:
- المهندس المعماري: يبني الجدران والأقفال (الأمن).
- أمين المكتبة: يتأكد من أن الذكاء الاصطناعي يستخدم الكتب الصحيحة (القوالب).
- المُدقق: يفحص الإيصالات للتأكد من عدم تسريب أي أسرار (الحوكمة).
- المحلل: هو الإنسان الذي يتخذ القرار النهائي.
5. الخلاصة الرئيسية
رسالة الورقة الأساسية بسيطة: الذكاء الاصطناعي أداة قوية، لكنه يحتاج إلى مدير.
لا ينبغي قياس نجاح هذا النظام بمجرد مدى "ذكاء" ما يبدو عليه الذكاء الاصطناعي. بل يجب قياسه بـ:
- هل اتبع القواعد؟
- هل كلف الكثير؟
- هل كشف معلومات خاصة بالخطأ؟
- هل فهم المحلل البشري بالفعل لماذا قدم الذكاء الاصطناعي ذلك الاقتراح؟
باختاً: الورقة لا تخترع ذكاءً اصطناعياً جديداً أو أداة أمنية جديدة. بدلاً من ذلك، هي تخترع إطار عمل إداري. إنه كتاب قواعد لكيفية السماح لمساعد الذكاء الاصطناعي بمساعدة خبراء الأمن بأمان دون أن يخرج الذكاء الاصطنا عن السيطرة، أو يهدر الأموال، أو يخالف القانون. إنها تحول "سحر الذكاء الاصطناعي" إلى "هندسة محكومة".
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.