Surgical Visual Understanding (SurgVU) Dataset
تقدم هذه الورقة مجموعة بيانات الفهم البصري الجراحي (SurgVU)، وهي مجموعة واسعة النطاق من فيديوهات الجراحة بمساعدة الروبوت مع تسميات مصاحبة مصممة لتعزيز الأبحاث التأسيسية ومعالجة تحديات تعلم الآلة المتنوعة ضمن علوم البيانات الجراحية.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أنك تحاول تعليم روبوت كيفية طهي وجبة معقدة، ولكن بدلاً من إعطائه وصفة، قمت فقط بتسليمه ألف ساعة من لقطات الفيديو لشيف محترف وهو يقطع، ويحرك، ويقدم الطعام. هذا هو بالضبط ما يفعله هذا البحث، ولكن بالنسبة للجراحة.
لقد أصدر المؤلفون، وهم فريق من شركة "إنتويتيف سيرجيكال" (Intuitive Surgical)، "مكتبة" ضخمة جديدة تسمى SurgVU Dataset. فكر في هذا ليس مجرد مجموعة من الفيديوهات، بل ككتاب مدرسي ضخم ومنظم للحواسيب التي تحاول تعلم كيفية فهم ما يحدث داخل جسم الإنسان أثناء الجراحة الروبوتية.
إليك تفصيل لما قاموا ببنائه، باستخدام تشبيهات بسيطة:
1. "المكونات الخام" (البيانات)
سجل الفريق أكثر من 840 ساعة من الفيديو. ولو أردت وضع ذلك في الاعتبار، فإذا شاهدت هذا المحتوى دون توقف، فسيستغرق الأمر منك ما يقرب من شهرين متتاليين.
- الإعداد: هذه ليست عمليات جراحية حقيقية على مرضى. إنها جلسات تدريبية يمارس فيها الجراحون على أنسجة الخنازير (نماذج خنزيرية) باستخدام نظام "دا فينشي" (da Vinci) الروبوتي.
- الجودة: الفيديوهات عالية الدقة ومسجلة بمعدل 60 إطاراً في الثانية. وينتج عن ذلك حوالي 18 مليون صورة فردية (إطارات) يمكن للحاسوب دراستها.
- المصدر: الأمر يشبه "محاكي الطيران" للجراحة، ولكن بدلاً من تسجيل رؤية الطيار فقط، قاموا أيضاً بتسجيل الأداة التي كان يمسكها الطيار بالضبط والمناورات التي كان يحاول القيام بها.
2. "الملصقات" (التوضيحات/الوسوم)
الفيديو الخام يصعب على الحاسوب فهمه. إنه يحتاج إلى "ملصقات" أو علامات ليعرف ما الذي ينظر إليه. أضاف المؤلفون ثلاثة أنواع رئيسية من العلامات:
- علامات الأدوات (الأواني): تماماً كما يحتوي المطبخ على ملاعق، وسكاكين، ومخافق، فإن الروبوت الجراحي لديه أدوات مثل حوامل الإبر، والمقصات، والملاقط. تخبر مجموعة البيانات الحاسوب بنوع الأداة الموجودة في الإطار ومتى تظهر.
- العقبة: أحياناً تكون الأداة مخفية خلف الأنسجة أو ذراع الروبوت، مما قد يربك الحاسوب. يعترف المؤلفون بأن هذه الملصقات قد تكون "مشوشة" (غير مثالية) بعض الشيء، وهو ما يمثل في الواقع تحدياً رائعاً للباحثين لحله.
- علامات الخطوات (خطوات الوصفة): تم تقسيم البيانات إلى "حركات" محددة، مثل "الخياطة" (suturing) أو "الشد/الإبعاد" (retracting - سحب الأنسجة جانباً). هناك ثماني فئات رئيسية لهذه الخطوات.
- علامات القصة (التعليق الصوتي): هذه هي الإضافة الأحدث. فلكل خطوة، يوجد وصف مكتوب يشرح بالضبط ما يحدث. إنه يشبه وجود راوٍ يقول: "الجراح الآن يقوم بتبديل الكاميرا بزاوية 30 درجة ويمسك بالقولون". هذا يساعد الحواسيب على تعلم الربط بين ما "يرونه" وما "يقرؤونه".
3. "اختبار الممارسة" (مجموعة التحقق)
للتأكد من أن الحواسيب تتعلم بالفعل ولا تقوم بمجرد التخمين، قدم الفريق "اختباراً" منفصلاً. وهو عبارة عن مجموعة أصغر من الفيديوهات حيث يتم تحديد الأدوات بمربعات (مثل لعبة "أين والدو؟"). وهذا يسمح للباحثين باختبار خوارزمياتهم لمعرفة ما إذا كان بإمكانهم تحديد الأدوات بشكل صحيح في الفيديو.
4. "الهدف" (لماذا؟)
المؤلفون لا يقومون بمجرد طرح بيانات؛ بل يدعون عالم علوم الحاسوب بأكمله للعب. إنهم يريدون حل ألغاز محددة، مثل:
- التوجيه في الوقت الفعلي: هل يمكن للحاسوب أن يراقب الجراحة ويخبر الجراح: "مهلاً، أنت على وشك قطع عصب"؟
- التعلم بدون معلم: هل يمكن للحاسوب اكتشاف الخطوات بمفرده، حتى لو كانت الملصقات غير مثالية؟
- تقييم المهارة: هل يمكن للحاسوب مشاهدة الجراح وإعطائه درجة على مدى ثبات يديه؟
- تحويل الفيديو إلى نص: هل يمكن للحاسوب مشاهدة مقطع وكتابة ملخص لما حدث؟
الخلاصة
فكر في مجموعة بيانات SurgVU كأنها ملعب ضخم ومشترك. قبل هذا، كان الأشخاص داخل شركة "إنتويتيف سيرجيكال" فقط هم من يملكون الوصول إلى هذا القدر من البيانات. الآن، لقد فتحوا الأبواب. إنهم يأملون من خلال منح الباحثين مكاناً مشتركاً للممارسة، أن يتمكنوا من تسريع اختراع أدوات جراحة روبوتية أكثر ذكاءً وأماناً وفائدة.
لقي صراحةً أن هذه هي أكبر مجموعة بيانات فيديو جراحية متاحة للجمهور حتى الآن، وهم يأملون أن تصبح "المعيار الذهبي" أو "نقطة المرجع" التي تُقاس بها جميع الأبحاث المستقبلية في هذا المجال.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.