CoAX: Cognitive-Oriented Attribution eXplanation User Model of Human Understanding of AI Explanations
تقدم هذه الورقة نموذج مستخدم CoAX، الذي يوظف النمذجة المعرفية لتحليل ومحاكاة استراتيجيات الاستدلال البشري عند تفسير شروحات الذكاء الاصطناعي للبيانات الجدولية، مما يقدم طريقة قابلة للتوسع لتشخيص أسباب فشل طرق الذكاء الاصطناعي القابل للتفسير الحالية غالباً في تحسين فهم المستخدم وتوجيه تطوير شروحات أكثر فعالية.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أن لديك صديقًا آليًا (روبوت) ذكيًا جدًا ولكنه غامض، يتخذ القرارات نيابة عنك؛ مثل إخبارك ما إذا كان النبيذ "جيدًا" أم "سيئًا"، أو ما إذا كان يجب الموافقة على طلب قرض. أنت تريد الوثوق بهذا الروبوت، لذا يقدم لك ملاحظة صغيرة تشرح لماذا اتخذ هذا القرار. يُسمى هذا الذكاء الاصطناعي القابل للتفسير (XAI).
ولكن تكم-ن المشكلة في أنه حتى مع وجود الملاحظة، لا يزال الناس يشعرون بالارتباك أو يخطئون في التخمين بشأن ما سيفعله الروبوت بعد ذلك. الأمر يشبه أن الروبوت يتحدث لغة لا تفهمها تمامًا، رغم أن الكلمات موجودة أمامك.
هذه الورقة البحثية، التي تحمل عنوان CoAX، هي بمث_ل "مترجم" و"مصحح أخطاء" لكيفية تفكير البشر عندما يحاولون فهم ملاحظات هذا الروبوت. قام الباحثون ببناء إنسان افتراضي (برنامج كمبيوتر يتصرف كشخص حقيقي) لمعرفة كيف تعالج أدمغتنا هذه التفسيرات بالضبط، ولماذا نخطئ أحيانًا في فهمها.
إليك قصة اكتشافهم، مقسمة ببساطة:
1. المشكلة: "الصندوق الأسود" والمستخدم المرتبك
لاحظ الباحثون أنه على الرغم من أن العلماء اخترعوا طرقًا عديدة لشرح قرارات الذكاء الاصطناعي، إلا أن البشر الحقيقيين لا يزالون يواجهون صعوبة في استخدامها. بعض التفسيرات تجعل الناس أسوأ في توقع ما سيفعله الذكاء الاصطناعي. تساءل المؤلفون: "لماذا؟ ماذا يحدث داخل عقل الإنسان عندما ينظر إلى هذه المخططات والأرقام؟"
2. الحل: بناء "إنسان افتراضي" (CoAX)
بدلاً من مجرد التخمين، قام الباحثون ببناء CoAX (التفسير الموجه معرفيًا - Cognitive-Oriented Attribution eXplanation). فكر في CoAX كأنه شخصية في لعبة فيديو تمت برمجتها لتفكر تمامًا مثل البشر الحقيقيين.
- كيف يعمل: شاهد الباحثون أولاً أشخاصًا حقيقيين (في "دراسة تمهيدية") وطلبوا منهم "التفكير بصوت عالٍ" أثناء النظر إلى تفسيرات الذكاء الاصطناعي. لاحظوا أن الناس استخدموا حيلًا ذهنية محددة، أو "استراتيجيات"، لفهم البيانات.
- الاستراتيجيات:
- استراتيجية "تجاهل الباقي": يختار بعض الناس ميزة أو اثنتين فقط يعتقدون أنها مهمة (مثل "محتوى الكحول") ويتجاهلون كل شيء آخر.
- استراتيجية "المحدد" (Highlighter): عندما يُعطى الشخص مخططًا يوضح أي الميزات "مهمة"، يركز الناس فقط على الأشرطة الأكبر ويحاولون تذكر حالات مشابهة من الماضي.
- استراتيجية "الجمع الرياضي": عندما يُعطى الشخص تفصيلًا دقيقًا (درجات إيجابية وسلبية)، يحاولون جمع الأرقام في رؤوسهم لمعرفة أي جانب سينتصر.
- النموذج: يأخذ CoAX هذه الاستراتيجيات ويحولها إلى رياضيات. إنه يحاكي إنسانًا لديه ذاكرة محدودة (ينسى الأمثلة القديمة) وانتباه محدود (يمكنه النظر إلى أشياء قليلة فقط في وقت واحد).
3. التجربة: اختبار الإنسان الافتراضي
بعد ذلك، أجرى الباحثون تجربة ضخمة مع أكثر من 300 شخص حقيقي. طلبوا من هؤلاء الأشخاص تخمين ما سيتوقعه الذكاء الاصطناعي لسيناريوهات مختلفة (مثل جودة النبيذ أو مستويات الدخل) تحت ثلاثة ظروف:
- بدون مساعدة: البيانات فقط.
- مساعدة بسيطة: قائمة بالميزات "المهمة".
- مساعدة تفصيلية: قائمة بالميزات مع درجات إيجابية وسلبية (الإسناد/Attribution).
وقاموا بمقارنة إجابات البشر الحقيقيين بإجابات الإنسان الافتراضي (CoAX).
الاكتشاف الكبير:
كان الإنسان الافتراضي (CoAX) أفضل بكثير في توقع ما سيفعله البشر الحقيقيون من برامج الكمبيوتر القياسية (مثل نماذج التعلم الآلي التقليدية).
- برامج الكمبيوتر القياسية تبحث فقط عن الأنماط في البيانات.
- أما CoAX فيبحث عن أنماط الاستدلال. لقد أدرك أن البشر لا يقومون بمجرد حسابات؛ بل يستخدمون اختصارات ذهنية، أو يرتبكون بسبب كثرة المعلومات، أو يسيئون تفسير "أهمية" ميزة ما.
4. ما وجدوه حول التفكير البشري
باستخدام إنسانهم الافتراضي، اكتشفوا أشياء مثيرة للاهتمام حول كيفية فشلنا في فهم الذكاء الاصطناعي:
- "الجمع الرياضي" هو الأفضل: عندما يُعطى الناس تفسيرات "إسناد" مفصلة (توضح بدقة كيف دفع كل عامل القرار للأعلى أو للأسفل)، فإنهم يميلون إلى استخدام استراتيجية "الجمع". وهذا كان يعمل بشكل أفضل. الأمر يشبه جمع الإيجابيات والسلبيات على ورقة.
- "القائمة البسيطة" مخادعة: عندما يُعطى الناس قائمة بسيطة بالميزات "المهمة" (دون توضيح ما إذا كانت جيدة أم سيئة)، فإنهم يصابون بالارتباك. البعض يحاول تخمين اتجاه التأثير، بينما يتجاهل آخرون القائمة تمامًا ويعودون لعاداتهم القديمة.
- الارتباك يؤدي إلى التجاهل: إذا كان التفسير مربكًا للغاية، فإن الناس يتخلصون منه ببساطة ويخمنون بناءً على ما يتذكرونه من الماضي، مما يعني تجاهل مساعدة الذكاء الاصطناعي فعليًا.
5. لماذا هذا مهم (المختبر الافتراضي)
الجزء الأروع في هذه الورقة هو أنه بمجرد بناء هذا الإنسان الافتراضي، يمكنهم استخدامه كـ مختبر محاكاة.
بدلاً من توظيف 300 شخص، ودفع أجورهم، وإجراء أسابيع من التجارب لاختبار فكرة جديدة، يمكن للباحثين الآن فقط "سؤال" الإنسان الافتراضي.
- مثال: "ماذا يحدث إذا عرضنا 9 ميزات بدلاً من 5؟" يمكن للإنسان الافتراضي محاكاة ذلك فورًا وإخباركم: "أوه، سيشعر الناس بالإرهاق وستنخفض دقة فهمهم".
- هذا يسمح للمصممين بـ تصحيح أخطاء تفسيرات الذكاء الاصطناعي قبل أن يروها لأي شخص حقيقي. يمكنهم إصلاح الأجزاء المربكة في نموذج الكمبيوتر أولاً.
الخلاصة
تجادل هذه الورقة بأنه لجعل تفسيرات الذكاء الاصطناعي أفضل، نحتاج إلى التوقف عن معاملة البشر كمعالجات بيانات بسيطة. نحن بحاجة إلى فهم أن البشر لديهم ذاكرة محدودة، وانتباه انتقائي، وعادات ذهنية محددة.
من خلال بناء إنسان افتراضي يحاكي هذه العادات، يمكننا معرفة سبب فشل تفسيرات الذكاء الاصطناعي الحالية وتصميم تفسيرات أفضل تساعد الناس حقًا على فهم عقل الروبوت، بدلاً من مجرد زيادة ارتباكهم. الأمر يشبه ضبط تردد الراديو لكي يتمكن العقل البشري أخيرًا من سماع الإشارة بوضوح.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.