GUIDE: A Benchmark for Understanding and Assisting Users in Open-Ended GUI Tasks
تقدم هذه الورقة البحثية GUIDE، وهو معيار مرجعي شامل يتكون من 67.5 ساعة من تسجيلات الشاشة لـ 120 مستخدماً مبتدئاً عبر 10 تطبيقات برمجية، صُمم لتقييم وتحسين قدرة نماذج الذكاء الاصطناعي على اكتشاف سلوك المستخدم، واستنتاج القصد، وتقديم المساعدة في الوقت المناسب في مهام واجهة المستخدم الرسومية (GUI) مفتوحة النهايات، وذلك عبر نقل التركيز من مجرد الأتمتة إلى الفهم التعاوني.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أنك تتعلم طهي طبق جديد ومعقد، مثل "السوفليه". أنت في المطبخ، تقطع، وتخلط، وتحرق إصبعك أحياناً.
الآن، تخيل وجود شيف آلي يقف بجانبك تماماً.
الطريقة القديمة (الذكاء الاصطناعي الحالي):
يراقبك الروبوت لثانية، يخمن أنك تريد صنع "سوفليه"، ثم يمسك بالمخفقة فوراً ليكمل المهمة بدلاً منك. إنه سريع، لكنه مزعج. أنت كنت تريد تعلم كيفية الخفق، وأردت أن تقرر بنفسك متى تضيف السكر. لقد تجاهل الروبوت ترددك، وأخطاءك، ورغبتك في تجربة وصفة مختلفة في منتصف الطريق. لقد أراد فقط إنجاز المهمة.
الطريقة الجديدة (ورقة بحث GUIDE):
يقول مؤلفو هذه الورقة: "توقفوا عن محاولة أن تكونوا روبوتاً يقوم بالعمل. ابدأوا بكونكم روبوتاً يفهم الطباخ".
لقد ابتكروا اختباراً جديداً يسمى GUIDE (تقييم اكتشاف نية المستخدم عبر الواجهة الرسومية) لتدريب الذكاء الاصطناعي ليكون "شريك طبخ" أفضل بدلاً من أن يكون "مديراً للطبخ".
إليكم كيف فعلوا ذلك، مقسماً إلى مفاهيم بسيطة:
1. المشكلة: فجوة "قراءة الأفكار"
البرامج الحاسوبية الحالية بارعة في النقر على الأزرار إذا أخبرتها بما يجب فعله بالضبط. لكننا في الحياة الواقعية لا نتحدث بلغة الروبوت. نحن نحرك الفأرة فوق زر ما، أو نغير رأينا، أو نضغط على "تراجع" (Undo)، أو نتنهد، ثم نجرب شيئاً آخر.
إذا رأى الذكاء الاصطناعي أنك تضغط على "تراجع" ثلاث مرات، فقد يظن: "أوه، إنه يتصرف بفوضوية فقط"، ويحاول إصلاح الأمر لك. لكن في الواقع، قد تكون محبطاً لأنك لا تجد أداة ما، أو قد تكون تختبر لترى أي لون يبدو أفضل. الذكاء الاصطناعي لا يعرف الفرق لأنه لا يفهم لماذا تنقر.
2. الحل: "درس طبخ" للذكاء الاصطناعي
لتعليم الذكال الاصطناعي لماذا نفعل الأشياء، قام الباحثون بتصوير 120 شخصاً حقيقياً (كانوا مبتدئين وليسوا خبراء) وهم يستخدمون برامج مثل Photoshop وPowerPoint وExcel.
لم يكتفوا بتصوير الشاشة فحسب؛ بل طلبوا من الناس التحدث بصوت عالٍ أثناء عملهم.
- "لست متأكداً مما إذا كانت هذه الدرجة من اللون الأزرق مناسبة..."
- "لماذا لا تتحرك هذه الصورة؟"
- "حسناً، أعتقد أنني سأجرب خطاً مختلفاً."
خلق هذا مكتبة ضخمة من "الصراع والاكتشاف البشري". إنها تشبه مكتبة تحتوي على 67.5 ساعة من أشخاص يتعلمون، ويفشلون، ويكتشفون الأمور.
3. الاختبارات الثلاثة (امتحان الطبخ)
وضع الباحثون هذه البيانات في اختبار لمعرفة ما إذا كان بإمكان الذكاء الاصطناعي أن يعمل كمساعد بشري مفيد. كان على الذكاء الاصطناٍء الإجابة على ثلاثة أسئلة بمجرد النظر إلى الشاشة (دون سماع الشخص يتحدث):
الاختبار 1: ما هي حالتك المزاجية؟ (اكتشاف حالة السلوك)
- التشبيه: هل الطباخ يستكشف رف التوابل؟ هل هو محبط لأن الفرن تعطل؟ هل هو في مرحلة التخطيط للخطوة التالية؟
- الهدف: يحتاج الذكاء الاصطناعي إلى رصد تعثرك قبل أن تطلب المساعدة حتى.
الاختبار 2: ماذا تحاول أن تفعل؟ (التنبؤ بالنية)
- التشبيه: أنت تحدق في صورة قطة. هل تحاول جعل القطة تبدو كالكلب؟ أم تحاول إزالة القطة تماماً؟
- الهدف: يحتاج الذكاء الاصطناعي إلى تخمين هدفك قصير المدى، حتى لو لم تنهه بعد.
الاختبار 3: هل تحتاج إلى يد مساعدة؟ (التنبؤ بالمساعدة)
- التشبيه: هل يجب على الشيف الروبوت أن يناولك الملح، أم يكتفي بالمراقبة؟ إذا كنت بحاجة للمساعدة، ما نوع المساعدة؟ هل تحتاج إلى درس تعليمي حول كيفية تقطيع البصل، أم تحتاج لشخص يخبرك أين يوجد الملح؟
- الهدف: يجب على الذكاء الاصطناعي أن يقرر اللحظة المثالية للتدخل دون أن يكون مزعجاً.
4. النتائج: الذكاء الاصطناعي لا يزال مبتدئاً
عندما اختبروا أذكى نماذج الذكاء الاصطناعي المتاحة اليوم في هذا "امتحان الطبخ"، كانت النتائج مختلطة:
- الأخبار السيئة: كان الذكاء الاصطناعي سيئاً في تخمين حالتك المزاجية. غالباً ما كان يعتقد أنك "تعمل بجد" بينما كنت في الواقع "محبطاً". لقد أصاب في حوالي 45% من الإجابات فقط.
- الأخبار الجيدة: عندما أعطوا الذكاء الاصطناعي سياقاً إضافياً (مثل إخباره: "مهلاً، هذا الشخص محبط حالياً")، أصبح الذكاء الاصطناعي أفضل بكثير في معرفة متى يساعد. لقد قفز من 45% إلى أكثر من 90% من الدقة في بعض الحالات.
الخلاصة الكبرى
تجادل الورقة البحثية بأنه لكي يكون الذكاء الاصطناعي مفيداً حقاً في المستقبل، لا ينبغي أن يكون مجرد جهاز تحكم عن بعد يقوم بالأشياء نيابة عنا. بل يجب أن يكون مساعد طيار.
تماماً كما أن مساعد الطيار الجيد في الطائرة لا يطير بالطائرة بدلاً منك، بل يراقب يديك، ويلاحظ ارتباكك، ويقدم اقتراحاً في الوقت المناسب، فإن الجيل القادم من المساعدين الحاسوبيين يحتاج إلى فهم النية البشرية.
GUIDE هو ساحة التدريب لتعليم الذكاء الاصطناعي التوقف عن كونه روبوتاً متسلطاً والبدء في كونه صديقاً مفيداً ومتفهماً.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.