MFE: A Multimodal Hand Exoskeleton with Interactive Force, Pressure and Thermo-haptic Feedback
تقدم هذه الورقة البحثية الهيكل الخارجي للتغذية الراجعة متعدد الأنماط (MFE)، وهو جهاز يد بـ 20 درجة من الحرية يدمج القوة النشطة، والضغط الأسموزي الكهربائي، والتغذية الراجعة الحرارية الكهروحرارية لتعزيز الوعي بالموقف والشفافية بشكل كبير في تطبيقات التحكم عن بُعد الروبوتية والواقع الافتراضي.
تخيل أنك تحاول خبز كعكة بينما ترتدي قفازات فرن سميكة، ولكن لا يمكنك رؤية الفرن، وليس لديك أدنى فكرة عما إذا كانت الكعكة تحترق أو ما إذا كانت العجينة باردة جداً. هذا هو بالضبط الشعما بـالتحكم في روبوت عن بُعد دون وجود تغذية راجعة جيدة لـ "اللمس" (haptic). يمكنك رؤية ما يفعله الروبوت، لكن لا يمكنك "الشعور" به.
يقدم هذا البحث حلاً يسمى MFE (الهيكل الخارجي للتغذية الراجعة متعدد الأنماط). فكر في MFE ليس مجرد قفاز، بل كـ "جلد خارق" يتيح لك الشعور بما يشعر به الروبوت، حتى لو كان الروبوت في الجانب الآخر من العالم.
إليك شرح لكيفية عمله، باستخدام تشبيهات بسيطة:
1. المشكلة: الروبوت "الأعمى"
عادة ما تمنحك قفازات الروبوت الحالية نوعاً واحداً فقط من الشعور. بعضها يهتز مثل الهاتف (يخبرك "لقد لمست شيئاً ما")، وبعضها يدفع للخلف مثل زنبرك صلب (يخبرك "أنا أصطدم بحائط"). لكن جلد الإنسان مذهل؛ فهو يشعر بـ الضغط (مدى قوة دفع شيء ما)، والقوة (إذا كان هناك شيء يسحب أو يدفع للخلف)، ودرجة الحرارة (ساخن أو بارد). معظم قفازات الروبوت تفتقر إلى هذه التفاصيل، مما يجعل الروبوت يبدو أخرقاً ومنفصلاً عن الواقع.
2. الحل: "الجلد الخارق" لـ MFE
إن MFE هو قفاز منخفض التكلفة ومفتوح المصدر يحاول إصلاح ذلك من خلال منحك ثلاثة أنواع متميزة من اللمس في وقت واحد:
"العضلة" (التغذية الراجعة للقوة):
كيف يعمل: يحتوي القفاز على محركات صغيرة في الأصابع.
التشبيه: تخيل أن يد الروبوت تمسك بصندوق ثقيل. عندما تحاول إغلاق أصابعك على القفاز، تدفع المحركات أصابعك بلطف للخلف، قائلة: "مهلاً، هذا ثقيل! أنا أدفع ضدك". يمكنها أيضاً سحب أصابعك، مما يحاكي الشعور بشيء يلتصق بيدك. يساعد هذا في معرفة مدى قوة إمساك الروبوت بالشيء دون كسر الجسم.
"الجلد" (الضغط والاهتزاز):
كيف يعمل: تحتوي أطراف الأصابع على وسادات مسطحة خاصة مليئة بسائل يتحرك عند تطبيق الكهرباء.
التشبيه: فكر في هذه الوسادات مثل بالونات مائية صغيرة غير مرئية تحت جلدك. عندما يلمس الروبوت إسفنجة ناعمة، تنتفخ الوسادة بلطف ضد طرف إصبعك، محاكية النعومة. إذا احتك الروبوت بسطح خشن، تهتز الوسادة بسرعة، مما يجعلك "تشعر" بالملمس. الأمر يشبه امتلاك جلد طبل صغير عالي التقنية مباشرة عند طرف إصبعك.
"المنظم الحراري" (التغذية الراجعة لدرجة الحرارة):
كيف يعمل: يتم إرفاق شريحة خاصة للتدفئة والتبريد في راحة اليد.
التشبيه: إذا لمس الروبوت كوباً من القهوة الساخنة، فإن الشريحة في قفازك ستجعل راحة يدك دافئة. إذا لمس الروبوت مكعب ثلج، فإن الشريحة ستبرد راحة يدك. إنه مثل محطة طقس شخصية ليدك، يخبرك ما إذا كان الشيء آمناً للمس أو إذا كان يحرقك.
3. كيف اختبروه
وضع الباحثون هذا القفاز على 10 أشخاص وجعلهم يتحكمون في ذراع روبوت للقيام بثلاث مهام صعبة:
الصندوق الغامض: وهم معصوبو الأعين، هل استطاعوا التمييز بين كتلة معدنية صلبة وكتلة مطاطية ناعمة؟
النتيجة: مع وجود نوع واحد فقط من التغذية الراجعة، كانوا يخطئون غالباً. ولكن مع "الجلد الخارق" الكامل (MFE)، أصابوا في التمييز بنسبة تقارب 100% من الوقت.
الكوب مانع الانسكاب: كان عليهم الإمساك بكوب مملوء بالرمل الناعم أثناء تحرك ذراع الروبوت.
النتيجة: بدون القفاز، تسببوا في انسكاب الرمل. مع تغذية MFE الكاملة، قاموا بتعديل قبضتهم بشكل مثالي ولم يسكبوا حبة رمل واحدة. أخبرتهم مشاعر "الضغط" و"القوة" بالضبط مدى قوة الضغط المطلوبة.
لعبة الساخن والبارد: كان عليهم تحديد أي من ثلاثة أكواب كان ساخناً، أو دافئاً، أو بارداً.
النتيجة: استطاعوا التمييز بسهولة، رغم أن الأمر استغرق حوالي 4 ثوانٍ لانتقال درجة الحرارة من الروبوت إلى أيديهم (مثل انتظار غليان الغلاية).
لماذا هذا مهم
هذا ليس مجرد أمر يتعلق بتحسين تجربة ألعاب الفيديو. هذه التكنولوجيا هي نقطة تحول لـ:
الجراحين: السماح للطبيب بـ "الشعور" بالأنسجة أثناء إجراء عملية جراحية لمريض في مدينة أخرى.
المناطق الخطرة: السماح للبشر بالتعامل مع النفايات المشعة أو استكشاف أعماق المحيطات دون التواجد هناك.
تعلم الذكاء الاصطناعي: مساعدة الروبوتات على تعلم كيفية التعامل مع الأشياء من خلال منحها حساً باللمس "شبيه بالبشر" للتعلم منه.
باختة القول: MFE هو قفاز رخيص ومفتوح المصدر يحول لمس الروبوت "الأعمى" إلى تجربة غنية متعددة الحواس، مما يتيح لك الشعور بالوزن، والملمس، ودرجة حرارة العالم من خلال آلة. إنه الفرق بين النظر إلى صورة لنار وبين الشعور الفعلي بدفئها على وجهك.
تعتمد أنظمة التحكم عن بُعد والواقع الافتراضي الحالية غالبًا على أجهزة لمسية توفر تغذية راجعة أحادية الوسيط (عادةً القوة أو الاهتزاز فقط). هذا القصور يفشل في محاكاة ثراء الإدراك الحسي للجلد البشري، الذي يدمج مدخلات حسية متنوعة تشمل القوة، والضغط، ودرجة الحرارة، والملمس.
الفجوة: واجهات اللمس عالية الدقة الموجودة حاليًا غالبًا ما تكون باهظة الثمن، ضخمة، تفتقر إلى التغذية الراجعة النشطة لارتداد الأصابع، أو لا تدعم التغذية الراجعة الحرارية.
الحاجة: هناك حاجة ماسة لمنصة منخفضة التكلفة، مفتوحة المصدر، وموحدة قادرة على تقديم تأثيرات لمسية متعددة الوسائط (القوة، والضغط، ودرجة الحرارة) لتعزيز الوعي بالموقف وأداء المهام في عمليات التحكم الروبوتية عن بُعد وجمع بيانات الذكاء الاصطنايد المجسد (Embodied AI).
2. المنهجية: نظام MFE
يقترح المؤلفون الهيكل الخارجي متعدد الوسائط (MFE)، وهو هيكل خارجي لليد مصمم لتقديم تغذية راجعية هجينة من خلال ثلاث وحدات تقنية متميزة:
أ. آلية التغذية الراجعة النشطة للقوة
الأجهزة: يستخدم مشغلات XL330-M288-T Dynamixel مدمجة مع آليات وصلات مطبوعة ثلاثية الأبعاد.
التصميم: يتميز بـ 20 درجة من الحرية (DoFs) لالتقاط وضعية اليد. يسمح تصميم الوصلات بالتحكم ثنائي الاتجاه (قوى الدفع والسحب) على كل إصبع، مما يتجاوز قيود الأنظمة التي تعمل بالكابلات.
التخصيص: يتضمن التصميم خيارات طول قابلة للطباعة ثلاثية الأبعاد وأطراف أصابع مرنة من مادة TPU لتناسب أحجام الأيدي المختلفة وضمان الراحة.
الاستشعار: يستخدم مشفرات المحرك الداخلية لالتقاط الحركة الأساسي (5 درجات حرية لكل إصبع) ومستشعرات تأثير هول الخارجية الاختيارية (TOPKSA07W) لتتبع المفاصل عالي الدقة (حتى 15 مشفرًا إضافيًا).
ب. ضغط ونبض أطراف الأصابع (المشغلات المائعية الدقيقة)
المبدأ: يعتمد على المشغلات الأسموزية الكهربائية المسطحة. يتم إنشاء مجال كهربائي بين لوحتين مطبوعتين (PCBs) مع طبقة من الورق المرشح (بمسامية 0.22 ميكرومتر) بينهما.
الآلية: يحفز المجال الكهربائي حركة السائل (بروبيلين كربونات) داخل القنوات الدقيقة، مما يؤدي إلى تمدد غشاء PDMS (ضغط) أو اهتزازه (نبض).
التحكم: يتم تشغيله بواسطة لوحة تشغيل ذات جهد عالٍ (200 فولت) باستخدام إشارات PWM للتحكم في الكثافة والتردد.
الميزة: يوفر قوى دفع وسحب ثنائية الاتجاه دون الحاجة إلى مضخات ميكانيكية ضخمة.
ج. التغذية الراجعة الحرارية
الأجهزة: يدمج مضخة حرارية كهروحرارية (TEC) متصلة براحة يد المستخدم.
التحكم: يستخدم نظام تحكم مغلق الحلقة (PID) مع مستشعر حرارة (NPT) لتنظيم درجة الحرارة.
النطاق: قادر على تقديم درجات حرارة تتراوح من 10 إلى 55 درجة مئوية.
الاستشعار عن بُعد: تم تجهيز اليد الروبوتية (Inspire Hand) بغشاء استشعار حرارة ذو دوائر مطبوعة مرنة (FPC) يحتوي على 27 مستشعرًا صغيرًا لالتقاط درجات حرارة الأجسام عن بُعد.
د. إطار عمل التحكم عن بُعد
النظام: متكامل مع ذراع روبوتية X-Arm 6 ومعالج Inspire Hand.
الربط (Mapping):
الموضع: تُربط المشفرات من MFE مباشرة بمفاصل اليد الروبوتية.
القوة: يطبق مخطط التحكم الهجين (القوة-الموضع) قوة رد فعل على المستخدم عندما تتجاوز قوة تلامس الروبوت حدًا معينًا (1.47 نيوتن).
الضغط: يتم تفعيله بالتزامن مع التغذية الراجعة للقوة بناءً على شدة التلامس.
الحرارة: تعمل متوسط درجة الحرارة من مستشعرات راحة يد الروبوت على تشغيل وحدة TEC في جانب المستخدم.
3. المساهمات الرئيسية
منصة MFE: هيكل خارضي لليد منخفض التكلفة (~350 دولارًا) ومفتوح المصدر قادر على تقديم تغذية راجعية لمسية هجينة (قوة + ضغط + حرارة)، على عكس البدائل التجارية الباهظة (مثل SenseGlove وHaptX).
تقنيات عرض مبتكرة:
آلية تغذية راجعة نشطة للقوة باستخدام محركات يتم التحكم فيها عبر العزم وآليات وصلات.
مشغلات مائعية دقيقة أسموزية كهربائية لتقديم ضغط ونبض واقعي وثنائي الاتجاه عند أطراف الأصابع.
نظام مضخة حرارية كهروحرارية مغلق الحلقة لعرض درجات الحرارة الديناميكية.
التحقق التجريبي: توصيف شامل للجهاز ودراسات مستخدم أظهرت فعالية النظام في سيناريوهات التحكم عن بُعد.
4. النتائج التجريبية
توصيف الجهاز
القوة: حقق قوى مخرجة تتراوح بين 3.55 نيوتن و8.18 نيوتن لكل إصبع، مع قوة توقف قصوى قدرها 4.5 نيوتن عند وضع الراحة. كانت مقاومة الرجوع (Back-driving) حوالي 0.5 نيوتن.
الضغط: ولد المشغل المائعي الدقيق ضغطًا ذرويًا قدره 2.47 كيلو باسكال (24 جرام من القوة) مع بروز أقصى قدره 1.65 ملم. وقد وصل إلى عتبة الإدراك البشري (0.5 كيلو باسكال) في حوالي 0.1 ثانية.
الحرارة: استقر النظام عند درجات حرارة تتراوح بين 10 و55 درجة مئوية خلال 3 إلى 6 ثوانٍ.
دراسات المستخدم (10 مشاركين)
قام المشاركون بأداء ثلاثة مهام تحت ظروف تغذية راجعة متغيرة (لا يوجد، قوة فقط، ضغط فقط، متعدد الوسائط):
التعرف على الأشياء (الشكل والصلابة):
حققت التغذية الراجعة متعددة الوسائط أعلى معدلات نجاح (100% للشكل، و90% للصلابة).
أدت التغذية الراجعة (القوة فقط) أو (الضغط فقط) إلى معدلات نجاح أقل بشكل ملحوظ (60-80%).
التعامل مع الأجسام القابلة للتشكيل:
أمسك المشاركون بكوب مملوء بالحبيبات بينما يتحرك الذراع الروبوتي.
أدت التغذية الراجعة متعددة الوسائط إلى فقدان وزن أقل بكثير (انسكاب) مقارنة بجميع الظروف الأخرى.
لم تحدث أي حالات سقوط للكوب مع التغذية الراجعة متعددة الوسائط، بينما حدثت حالات سقوط مع عدم وجود تغذية راجعة أو مع التغذية الراجعة للقوة فقط.
التعرف على درجة الحرارة:
نجح المشاركون في ترتيب أكواب الماء حسب درجة الحرارة (4، 20، 60 درجة مئوية).
بلغ متوسط تأخير الإدراك ~4 ثوانٍ لتغيرات درجة الحرارة، وهو ما يعادل فرقًا يمكن تمييزه بنحو 5 درجات مئوية.
5. الأهمية والخاتمة
تعزيز الوعي بالموقف: تثبت الدراسة أن الجمع بين التغذية الراجعة للقوة والضغط والحرارة يحسن بشكل كبير من قدرة المستخدم على التعرف على خصائص الأجسام (الصلابة، الشكل) والتعامل مع الأجسام القابلة للتشكيل بأمان.
سهولة الوصول: من خلال كونها مفتوحة المصدر ومنخفضة التكلفة، تخفض MFE حاجز الدخول أمام الباحثين في مجالات الروبوتات والواقع الافتراضي، مما يسمح بتبني أوسع لأبحاث اللمس متعدد الوسائط.
الذكاء الاصطنا edge (Embodied AI): يعمل النظام كواجهة التقاط بيانات عالية الدقة، مما قد يحسن جودة البيانات التي يتم جمعها لتعلم التقليد الروبوتي وتدريب الذكاء الاصطنايد المجسد.
العمل المستقبلي: يشير المؤلفون إلى القيود المتعلقة بزمن الاستجابة الحرارية (بسبب السعة الحرارية النوعية) والدقة المكانية، مما يقترح تحسينات مستقبلية عبر مضخات حرارية أصغر، وجهد كهربائي أعلى، ومصفوفات كهروحرارية.
باختصار، تمثل MFE خطوة مهمة للأمام في جعل التحكم عن بُعد الغني ومتعدد الوسائط متاحًا، مما يسد الفجوة بين الإدراك الحسي البشري وقدرات التغذية الراجعة الروبوتية الحالية.