From Transparent Labware Segmentation to Collision Avoidance: A Real-Time Edge-Aware Perception Pipeline
تقدم هذه الورقة إطار عمل لتجزئة الكائنات في الوقت الفعلي، خفيف الوزن ومعتمد على إدراك الحواف، ومجموعة بيانات مقابلة تمكن الروبوتات من تجنب الاصطدام بالأواني الزجاجية المختبرية الشفافة عبر الاستفادة من الخطوط الخارجية للحدود لتحقيق دقة وكفاءة عاليتين في الإدراك ثلاثي الأبعاد.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أنك تحاول تعليم روبوت المشي عبر غرفة مليئة بالأشباح غير المرئية. في عالم الروبوتات، عادة ما يكون "الرؤية" أمراً سهلاً إذا كانت الأجسام صلبة وملونة؛ إذ يمكن للكاميرا رصد صندوق أحمر أو كرسي أزرق على الفور. ولكن عندما تكون تلك الأجسام مصنوعة من الزجاج الشفاف — مثل الكؤوس والدوارق المستخدمة في مختبرات الكيمياء — فإنها تصبح كابوساً لعيون الروبوت. فالزجاج لا يكتفي بالجلوس في مكانه فحسب، بل يحني الضوء (الانكسار)، ويعكسه (الانعكاس)، وغالباً ما يبدو تماماً مثل الخلفية التي خلفه. الكاميرات القياسية، التي تعتمد على مستشعرات العمق أو الألوان البسيطة، غالباً ما ترتبك، فلا ترى سوى مساحة فارغة أو فوضى مشوهة. هذه مشكلة كبيرة لأن الروبوتات تحتاج إلى التحرك بأمان حول هذه الأدوات الهشة دون تحطيمها. وإذا لم يستطع الروبوت "رؤية" الزجاج غير المرئي، فلن يتمكن من تجنب الاصطدام به. تتناول هذه الورقة البحثية هذا الصداع تحديداً: كيف تمنح الروبوت "قوة خارقة" لرصد الزجاج الشفاف في الوقت الفعلي، بمجرد النظر إليه، حتى يتمكن من الرقص حول معدات المختبر دون أن يتعثر.
قرر الباحثون وراء هذه الدراسة، شيجون دينغ، وتشين كيان، وويوي شانغ، وجونلين شيونغ، التوقف عن محاولة رؤية داخل الزجاج (الأمر الذي يعد فوضوياً ومربكاً) والتركيز بدلاً من ذلك كلياً على الحواف. فكر في الأمر كأنك تحاول العثين على كيس بلاستيكي شفاف وسط كومة من الملابس؛ لا يمكنك رؤية البلاستيك نفسه، ولكن يمكنك رؤية الخطوط المتعرجة حيث ينحني الضوء. بنى الفريق "دماغاً" جديداً للروبوتات يعمل مثل المحقق الذي يبحث فقط عن الخطوط الخارجية. لقد أخذوا نظاماً قياسياً وسريعاً للتعرف على الصور ومنحوه ترقيتين خاصتين. أولاً، أضافوا "محقق حدود" يتجاهل الجزء المربك داخل الزجاج ويركز على الخطوط الحادة حيث يلتقي الزجاج بالهواء. ثان، أضافوا "مرشح تركيز" يساعد الروبوت على تجاهل الانعكاسات اللامعة والمشتتة التي تخدع الكاميرات عادةً.
لتدريب هذا الدماغ الجديد، لم يستطع الفريق استخدام الصور القديمة لأنهم لم يمتلكوا عدداً كافياً من النوع المناسب. لذا، أنشأوا مكتبتهم الضخمة الخاصة المسماة LabGlass-IS. وهي تشبه ألبوم صور يحتوي على 3,485 صورة لـ 21 نوعاً مختلفاً من الأواني الزجاجية المختبرية — كؤوس، أنابيب اختبار، دوارق، ومقطرات — تم التقاطها في مختبرات حقيقية وفوضوية. لقد رسموا يدوياً الخطوط حول كل قطعة زجاج في هذه الصور، لتعليم الروبوت بالضبط ما يجب أن يبحث عنه.
عندما اختبروا نظامهم الجديد، كانت النتائج مبهرة. استطاع "دماغ" الروبوت رصد وتحديد حواف الزجاج في غضًى قدره 7.1 ميلي ثانية فقط لكل إطار. هذا أسرع من رمشة العين البشرية! ومن حيث الدقة، سجل النظام 97.80 على مقياس يقيس مدى جودة تتبع الحواف (يسمى درجة F للحدود - Boundary F-score). كانت هذه قفزة هائلة للأمام، حيث تفوق على أفضل طريقة تالية بفارق يقرب من 19 نقطة. والأفضل من ذلك، أن النظام كان خفيف الوزن بشكل مذهل، حيث استخدم 2.85% فقط من قدرة الحاسوب المطلوبة من أقرب منافسيه، مما يعني أنه يمكنه العمل على أجهزة كمبيوتر الروبوت الصغيرة والمحمولة بدلاً من الحاجة إلى حاسوب عملاق.
لكن رؤية الزجاج هي نصف المعركة فقط؛ إذ يحتاج الروبوت أيضاً إلى معرفة مكان الزجاج في الفضاء ثلاثي الأبعاد لتجنب الاصطدام به. حل الفريق هذه المشكلة بجعل الروبوت يحرك كاميرته حول الزجاج من زوايا مختلفة، مثل شخص يميل رأسه لرؤية جسم لامع بشكل أفضل. ومن خلال دمج هذه الرؤى المختلفة، استطاع الروبوت حساب نقطة المركز الدقيقة لكل جسم زجاجي في الفضاء ثلاثي الأبعاد. بعد ذلك، قاموا بتغليف كل جسم بـ "فقاعة سلامة" — وهي عبارة عن صندوق ثلاثي الأبعاد بسيط وتحفظي، أكبر قليلاً من الزجاج نفسه. وهذا يضمن أنه حتى لو كان تخمين الروبوت غير دقيق تماماً، فإنه سيظل بعيداً عن المسار.
في الاختبارات الواقعية باستخدام ذراع روبوت حقيقي، عمل هذا النظام ببراعة. نجح الروبوت في تجنب الاصطدامات في 93.3% من التجارب، حتى عندما كان الزجاج صغيراً، أو متداخلاً، أو في ظروف إضاءة صعبة. تمت العملية برمتها، من رؤية الزجاج إلى تخطيط مسار آمن حوله، بسرعة كبيرة لدرجة أن الروبوت لم يضطر حتى للتوقف للتفكير. ويخلص المؤلفون إلى أنه بينما يعد هذا النظام حالياً بارعاً في تجنب الاصطدامات، إلا أنه ليس جاهزاً بعد لالتقاط الزجاج بلطف. ومع ذلك، فإنه يثبت أنه مع المزيج الصحيح من الرؤية القائمة على اكتشاف الحواف والتخمين الذكي ثلاثي الأبعاد، يمكن للروبوتات أخيراً التنقل في العالم غير المرئي للأواني الزجاجية الشفافة دون كسر وعاء واحد.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.