EgoSpot:Egocentric Multimodal Control for Hands-Free Mobile Manipulation
تقدم هذه الورقة البحثية EgoSpot، وهو إطار عمل مبتكر للتحكم متعدد الوسائط بدون استخدام اليدين لروبوت Boston Dynamics Spot، يدمج بين نظرات العين، وإيماءات الرأس، والأوامر الصوتية عبر HoloLens 2 لتمكين التحكم الطبيعي والميسّر في المناورة المتنقلة للمستخدمين ذوي الإعاقات الجسدية، محققاً أداءً يضاهي التحكم التقليدي القائم على عصا التحكم.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أنك تريد أن تضرب روبوت "هاي فايف" (تحية باليد)، لكن يديك مشغولتان بحمل كوب قهوة، أو ربما لا يمكنك استخدام يديك على الإطلاق. عادةً، للتحدث مع روبوت، تحتاج إلى جهاز تحكم عن بعد، أو عصا تحكم (Joystick)، أو لوحة مفاتيح — وهي أدوات تتطلب منك الإمساك والضغط. ولكن ماذا لو كان بإمكانك فقط النظر إلى حيث تريد للروبوت أن يذهب، وإيماء برأسك لتمسك بشيء ما، والتحدث لتخبره بما يجب فعله؟
هذا هو بالضبط ما يدور حوله بحث "EgoSpot". إنه طريقة جديدة للتحكم في كلب روبوتي (من نوع Boston Dynamics Spot) باستخدام نظارات ذكية خاصة (Microsoft Hololens 2)، مصممة خصيصاً للأشخاص الذين قد لا يتمكنون من استخدام أيديهم.
إليك تفصيل لكيفية عمل ذلك، باستخدام بعض التشبيهات من الحياة اليومية:
1. المشكلة: حاجز "جهاز التحكم عن بعد"
فكر في معظم أجهزة التحكم في الروبوتات مثل أجهزة التحكم في ألعاب الفيديو. عليك أن تمسكها، وتضغط على الأزرار، وتحرك العصي. إذا كنت تعاني من إعاقة جسدية تحد من حركة يدك، فإن جهاز التحكم هذا يشبه باباً مغلقاً — ببسافطة لا يمكنك العبور منه. الطريقة الحالية التي نتواصل بها مع الروبوتات تركز كثيراً على أيدينا، متجاهلة حقيقة أن البشر يتواصلون بشكل طبيعي بأعينهم، ورؤوسهم، وأصواتهم.
2. الحل: "EgoSpot" (الدماغ الجديد للروبوت)
بنى الباحثون نظاماً يسمى EgoSpot. يأتي الاسم من كلمة "Egocentric" (مركزي الذات)، وهي طريقة فخمة لقول "من وجهة نظر الشخص الذي يرتدي النظارات".
بدلاً من انتظار الروبوت لضغط زر، فإنه ينتظر أنت لتعمل بشكل طبيعي. إنه يعامل جسدك كجهاز التحكم عن بعد.
3. كيف يعمل: الأدوات السحرية الثلاث
يستخدم النظام ثلاثة "أدوات سحرية" تعمل معاً مثل قائد الأوركسترا الذي يقود الفرقة:
- العينان (مؤشر الليزر):
تخيل أنك توجه مؤشر ليزر نحو جدار. أينما تنظر، يعرف الكلب الروبوتي أن هذا هو المكان الذي تريد الذهاب إليه. إذا حدقت في كرسي، يسير الروبوت نحو الكرسي. أنت لا تحتاج لضغط زر "للأمام"؛ أنت فقط تنظر، والروبوت يتبع نظرتك. - الرأس (خيط محرك الدمى):
لجعل ذراع الروبوت تتحرك، تقوم بتحريك رأسك. إذا أملت رأسك لليسار، يميل ذراع الروبوت لليسار. إذا أومأت برأسك للأعلى، يرتفع الذراع للأعلى. الأمر يشبه كون ذراع الروبوت دمية متحركة، ورأسك هو المحرك لها. الروبوت حرفياً يحاكي حركات رأسك بذراعه. - الصوت (مركز القيادة):
بما أنه لا يمكنك استخدام يديك لتغيير الأنماط (مثل الانتقال من "المشي" إلى "الإمساك بشيء")، فإنك تستخدم صوتك. يمكنك ببساطة قول: "اذهب إلى وضع الذراع"، أو "التقط تلك الزجاجة". الأمر يشبه التحدث إلى مساعد ذكي (مثل Siri أو Alexa)، ولكن بدلاً من تشغيل الموسيقى، يقوم الروبوت بتحريك جسده.
4. السر الخفي: "الخريطة المشتركة"
أحد أصعب أجزاء هذا المشروع كان التأكد من أن الروبوت والنظارات "يتحدثان نفس اللغة" فيما يتعلق بمكان الأشياء في الفضاء.
- التشبيه: تخيل أنك ترتدي خريطة على نظاراتك، وأن الروبوت لديه خريطة مختلفة في دماغه. إذا أشرت إلى شجرة، تقول خريطتك "الشجرة تبعد 5 خطوات"، لكن خريطة الروبوت قد تقول "الشجرة تبعد 10 خطوات".
- الحل: استخدم الباحثون "مرساة GPS رقمية" (تسمى Azure Spatial Anchors). إنها تشبه تثبيت علم رقمي في الغرفة يمكن لكل من النظارات والروبوت رؤيته. هذا يضمن أنه عندما تنظر إلى طاولة، يرى الروبوت نفس الطاولة تماماً في نفس المكان تماماً، حتى لا يصطدم بجدار أو يخطئ في تحديد الشيء.
5. النتائج: هل هو جيد؟
اختبر الفريق هذا النظام مع 11 شخصاً.
- السرعة: كان الروبوت أبطأ قليلاً عند التحكم به عبر النظارات مقارنة بعصا التحكم التقليدية (استغرق ضعف الوقت تقريباً للمشي إلى مكان ما).
- التجربة: ومع ذلك، قيم المستخدمون التجربة بشكل مرتفع جداً (4 من أصل 5 نجوم).
- الخلاصة: بينما تعتبر عصا التحكم أسرع للاعب محترف، فإن نظام النظارات جيد بنفس القدر لإنجاز المهمة، ولكنه يفتح الباب للأشخاص الذين لا يمكنهم استخدام عصا التحكم على الإطلاق. إنه يستبدل القليل من السرعة بقدر هائل من الحرية والقدرة على الوصول.
لماذا هذا مهم؟
هذا ليس مجرد جعل كلب روبوتي يمشي حولاً. إنه يتعلق بـ الكرامة والاستقلالية.
تخيل شخصاً في كرسي متحرك يريد التقاط كتاب من رف عالٍ. مع EgoSpot، يمكنه النظر إلى الكتاب، وقول "التقطه"، وإمالة رأسه لتوجيه ذراع الروبوت. لن يحتاج لطلب المساعدة؛ لن يحتاج لجهاز تحكم خاص لا يستطيع الإمساك به. هو فقط يستخدم حواسه الطبيعية.
باختصار: يحول EgoSpot عينيك، ورأسك، وصوتك إلى جهاز تحكم عن بعد، مما يجعل الروبوتات متاحة للجميع، بغض النظر عن قدراتهم الجسدية. إنه يشبه منح الروبوت "حاسة سادسة" تفهم النوايا البشرية بشكل مباشر.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.