EgoMAGIC- An Egocentric Video Field Medicine Dataset for Training Perception Algorithms
تقدم هذه الورقة البحثية EgoMAGIC، وهو عبارة عن مجموعة بيانات فيديو طبي من منظور الشخص الأول واسعة النطاق، صُممت لدعم تطوير المساعدين الافتراضيين المتكاملين مع الواقع المعزز من خلال مهام مثل اكتشاف الأفعال، وتحديد الأشياء، وتصحيح الأخطاء.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أنك مسعف في وسط ساحة معركة فوضوية. أنت منهك، والبيئة صاخبة وفوضوية، وتحتاج إلى إجراء طبي لإنقاذ حياة شخص ما — مثل وضع عاصبة (tourniquet) أو فتح مجرى الهواء — لكنك تشك في قدراتك. تتمنى لو كان لديك "مساعد طيار رقمي" يهمس في أذنك قائلاً: "رائع، لقد طبقت الضغط؛ الآن، أمسك بختم الصدر (chest seal)."
تقدم هذه الورقة البحثية EgoMAGIC، وهي ساحة تدريب رقمية ضخمة مصممة لبناء هذا النوع من "المساعد الرقمي" بالضبط باستخدام الذكاء الاصطناعي.
إليك تفصيل لكيفية عمل ذلك، باستخدام بعض التشبيهات البسيطة:
١. منظور "الشخص الأول" (رؤية كاميرا GoPro)
معظم أنظمة الذكاء الاصطناعي يتم تدريبها من خلال النظر إلى فيديوهات من "منظور الشخص الثالث" (مثل مشاهدة فيلم). ولكن إذا كنت تريد للذكاء الاصطناعي أن يساعد مسعفاً، فعليه أن يرى ما يراه المسعف.
فكر في الأمر كتعلم لعب لعبة فيديو؛ أنت لا تتعلم من خلال مشاهدة لاعب محترف على شاشة التلفاز من بعيد، بل تتعلم من خلال النظر عبر عيني الشخصية. EgoMAGIC هي مجموعة من أكثر من ٣٣٠٠ فيديو تم تسجيلها من كاميرا مثبتة على الرأس. إنها تمثل "عيون" المسعف، حيث تلتقط بالضبط ما تفعله يداه وما هي الأدوات التي يمسك بها.
٢. مجموعة البيانات (الكتاب الطبي الأمثل)
إذا أردت تعليم طفل التعرف على الحيوانات، فلن تكتفي بإظهار صورة واحدة لكلب له؛ بل ستعرض عليه آلاف الكلاب — كلاب كبيرة، صغيرة، ذات شعر كثيف، وكلاب تحت المطر.
EgoMAGIC تشبه كتاباً مدرسياً ضخماً وعالي التقنية. فهي تحتوي على:
- ٥٠ مهمة طبية مختلفة (من وقف النزيف الحاد إلى المساعدة على التنفس).
- الملايين من التصنيفات (Labels). تخيل لو أن كل شيء في الكتاب المدرسي عليه ملصق مضيء يوضح ماهيته بالضبط (مثلاً: "هذا ضمادة"، "هذا مشرط"). هذا هو بالضبط ما فعله الباحثون للذكاء الاصطناعي.
٣. التحدي (مشكلة "السرعة والفوضى")
تعليم الذكاء الاصطناعي التعرف على قطة أمر سهل لأن القطة عادة ما تجلس ساكنة. أما تعليم الذك الذكاء الاصطناعي التعرف على الخطوات الطبية فهو يشبه محاولة قراءة كتاب أثناء ركوب أفعوانية (Roller Coaster) في غرفة مظلمة.
يشير الباحثون إلى أن المهام الطبية صعبة للغاية على الذكاء الاصطناعي لأن:
- خطوات "ارمش وتفوتك": بعض الإجراءات الطبية تحدث في أقل من ثانية.
- "المهام المزدوجة": قد يقوم المسعف بشيئين في وقت واحد (مثل الضغط على الجرح بيد بينما يمد يده الأخرى لأخذ أداة).
- "الفوضى": البيئة غير مرتبة، الأيدي تتحرك داخل وخارج الإطار، والأشياء تُصدم وتتحرك من مكانها.
٤. نماذج "الدماغ" (الطلاب)
تختبر الورقة ثلاثة نماذج مختلفة من "الطلاب" (نماذج الذكاء الاصطناعي) لمعرفة أي منها يتعلم الخطوات الطبية بشكل أفضل:
- نموذج RNN (الحكواتي): يحاول هذا النموذج تذكر ما حدث قبل لحظة ليتوقع ما يحدث الآن. إنه يشبه شخصاً يقول: "حسناً، لقد أمسك بالشاش للتو، لذا فمن المحتمل أنه على وشك لف الجرح."
- نموذج Transformer (محلل الأنماط): ينظر هذا النموذج إلى المشهد بأك-مله، باحثاً عن أنماط معقدة. إنه يشبه طباخاً ماهراً يمكنه النظر إلى مطبخ فوضوي ومعرفة المرحلة التي وصل إليها في الوصفة فوراً.
- نموذج TAS (المجزئ): يحاول هذا النموذج رسم "خط زمني" للأفعال.
النتيجة؟ حقق "الحكواتي" و"محلل الأنماط" أفضل أداء، مما يثبت أنه لمساعدة المسعف، يحتاج الذكاء الاصطناعي إلى فهم تدفق الوقت، وليس فقط النظر إلى صور منفردة.
لماذا يهم هذا؟
في المستقبل، يمكن أن يؤدي هذا البحث إلى ظهور نظارات الواقع المعزز (AR) للأطباء ومسعفي القتال. وبينما يعملون، يمكن للنظارات أن تسلط الض الضوء على الأداة التالية التي يحتاجونها أو تومض بتحذير أحمر إذا تخطوا خطوة حاسمة. EgoMAGIC هي الأساس الذي يُوضع اليوم لكي يتمكن "المساعدون الرقميون" في المستقبل من إنقاذ الأرواح.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.