Automated estimation of gadoid and flatfish abundance in stereo-BRUV footage using YOLO object detection
تقدم هذه الدراسة مساراً مؤتمتاً قائماً على تقنية YOLO ينجح في اكتشاف الأسماك الغادوية والأسماك المفلطحة في لقطات كاميرات الاستطلاع تحت الماء ثلاثية الأبعاد (stereo-BRUV) من مزارع الرياح في بحر الشمال، مع تقديم مقياس مخصص للتحقق من قدرته على تقدير وفرة الأسماك بكفاءة، وإثبات أن الجمع بين وجهات نظر الكاميرا المزدوجة يعزز حساسية تقديرات العشيرة مقارنة بوجهات النظر الأحادية.
المؤلفون الأصليون:Mario Lambrette, Anthony W. J. Bicknell, Samuel Gierhart, Matthew J. Witt
يعتبر قاع المحيط مشهداً طبيعياً شاسعاً ومتغيراً، حيث تزدهر الحياة فيه بطرق غالباً ما تكون غير مرئية للعين البشرية. ولفهم كيفية تغير مجتمعات الأسماك بمرور الوقت، يحتاج العلماء إلى عدّها، لكن القيام بذلك تحت الماء أمر صعب للغاية. تعتمد الطرق التقليدية غالباً على سحب الشباك أو الفخاخ عبر قاع البحر، مما قد يضر بالأنظمة البيئية ذاتها التي يحاول الباحثون دراستها. وقد ظهر بديل أكثر رفقاً: وهو التصوير بالفيديو عن بُعد باستخدام الطعم. يقوم العلماء بإنزال نظام كاميرا، مثقل بكمية صغيرة من طعم الأسماك، إلى قاع المحيط. تجذب رائحة الطعم الأسماك المحلية، وتقوم الكاميرا بتسجيلها لمدة ساعة أو أكثر. توفر هذه الطريقة نافذة غير جائرة على الحياة البحرية، ولكنها تأتي مع عقبة هائلة؛ إذ يمكن لمسح واحد أن يولد مئات الجيجابايت من لقطات الفيديو. وللحصول على تعداد للأسماك، يجب على خبير بشري الجلوس ومشاهدة كل دقيقة من تلك اللقطات، إطاراً تلو الآخر، لحصر أقصى عدد من الأفراد الذين شوهدوا في وقت واحد. هذه العملية اليدوية بطيئة ومكلفة، وتحد من كمية البيانات التي يمكن تحليلها في النهاية.
لقد تصدى فريق من الباحثين في جامعة إكستر لهذه العقبة من خلال تعليم الحواسيب كيفية العدّ. فقد طوروا نظام ذكاء اصطناعي متخصصاً صُمم لمشاهدة فيديوهات تحت الماء والتعرف تلقائياً على مجموعتين محددتين من الأسماك: الأسماك الشبيهة بالقد (المعروفة باسم Gadoids)، والأسماك المفلطحة. أُجريت الدراسة في شمال بحر الشمال، وهي منطقة تتخللها مزارع الرياح البحرية حيث كان الفريق يراقب كيفية تأثير هذه الهياكل الضخمة على حياة الأسماك المحلية. وبدلاً من الاعتماد على زاوية كاميرا واحدة، استخدم الفريق نظام ستيريو (مجسم)، والذي يسجل المشهد من منظورين مختلفين قليلاً في آن واحد، تماماً كما تفعل العين البشرية. ومن خلال تدريب ذكائهم الاصطناعي على آلاف الإطارات المرئية المشروحة، أنشأوا مسار عمل يمكنه فحص ساعات من اللقطات في جزء ضئيل من الوقت الذي يستغرقه البشر، مما ينتج تعدادات موثوقة لوفرة الأسماك.
لم يكتفِ الباحثون ببناء جهاز كشف فحسب، بل بنوا نظاماً يفهم التحديات المحددة للعدّ تحت الماء. ففي إطار الفيديو المزدحم، غالباً ما تختبئ الأسماك خلف بعضها البعض، مما يجعل من الصعب تحديد العدد الموجود بدقة. وقد درب الفريق نموذجهم على إدراك أنه كلما زاد عدد الأسماك، زادت صعوبة عدّها بشكل مثالي. كما استحدثوا طريقة جديدة لقياس النجاح تأخذ هذا الواقع في الاعتبار، حيث تقبل بأن هامش خطأ صغيراً هو أمر طبيعي عندما تكون الأسماك متكدسة معاً. وعندما اختبروا نظامهم مقابل التعدادات التي أجراها الخبراء البشر، كانت النتائج مذهلة؛ فقد طابقت تقديرات الكمبيوتر تعدادات البشر بدقة عالية جداً، وحددت بشكل صحيح وجود والأعداد التقريبية للأسماك المفلطحة والأسماك الشبيهة بالقد في كل حالة تقريباً. كان النظام فعالاً لدرجة أنه استطاع استبدال جزء كبير من العمل اليدوي، مما قلص الوقت اللازم لمعالجة بيانات المسح من شهور إلى أسابيع.
جاء أحد الاكتشافات الأكثر إثارة للدهشة من الطريقة التي استخدم بها النظام زاويتي الكاميرا. ففي المسوحات التقليدية، يختار العلماء عادةً عرض كاميرا واحدة فقط للعدّ، ويعاملون الكاميرا الثانية كنسخة احتياطية أو لقياس طول السمكة. ووجد الباحثون أنه من خلال السماح للكمبيوتر بالنظر إلى كلتا الزاويتين والاكتفاء بأخذ العدد الأعلى من الاثنين، حصلوا على صورة أوضح لمجتمع الأسماك. هذا النهج، الذي أطلقوا عليه اسم "العد الأقصى"، قلل من الضجيج وعدم اليقين في البيانات. لقد جعل نتائج المسح أكثر حساسية للتغيرات الحقيقية في البيئة. فعلى سبيل المثال، عند تحليل كيفية تغير أعداد الأسماك مع المسافة من قواعد توربينات الرياح، كشفت طريقة الكاميرتين عن نمط واضح فاتته طريقة الكاميرا الواحدة. فالأسماك المفلطحة، التي تميل للبقاء منخفضة والاندماج مع قاع البحر، كانت صعبة الرصد بشكل خاص من زاوية واحدة فقط، لكن نهج العرض المزدوج التقطها بفعالية أكبر بكثير.
كما سلطت الدراسة الضوء على الفويد العملية لهذا الأتمتة للمراقبة طويلة الأمد. وبينما تطلب إعداد النظام استثماراً أولياً من الوقت لتسمية بيانات التدريب وضبط البرامج، إلا أن العائد كان فورياً في الميدان. فقد تمكن الفريق من معالجة بيانات مسح عام 2024 في 68 يوماً فقط، مقارنة بـ 134 يوماً لمسح العام السابق الذي اعتمد كلياً على العد اليدوي. هذه السرعة لا توفر الوقت فحسب، بل تسمح للعلماء بطرح أسئلة أكثر تعقيداً حول كيفية استجابة النظم البيئية البحرية للنشاط البشري. وأشار الباحثون إلى أنه بينما تم تصميم نظامهم حالياً ليتناسب مع أنواع محددة من الأسماك والظروف في بحر الشمال، فإن إطار العمل مفتوح ومتاح. وهو يثبت أنه مع الأدوات الصحيحة، يمكن تحويل الأحجام الهائلة من بيانات الفيديو التي يجمعها علماء البحار إلى معرفة قابلة للتطبيق دون أن تُدفن تحت وطأة العمل اليدوي.
يوحي نجاح هذا المشروع بمسار جديد للمستقبل في مجال الحفاظ على البيئة البحرية. فمن خلال أتمتة المهمة المملة للعدّ، يمكن للعلماء تركيز طاقتهم على تفسير البيانات بدلاً من مجرد جمعها. إن القدرة على اكتشاف التغيرات الطفيفة في وفرة الأسماك، مثل انخفاض الأعداد كلما ابتعدنا عن توربينات الرياح، توفر أدلة حاسمة لإدارة هذه المواقع الصناعية بمسؤولية. ويؤكد الباحثون أنه بينما يعد الكمبيوتر أداة قوية، فإنه يعمل بشكل أفضل عندما يكمل الخبرة البشرية بدلاً من استبدالها بالكامل. لقد صُمم النظام للتعامل مع الجزء الأكبر من عملية العد، مع تحديد المشاهد الأكثر تعقيداً للمراجعة البشرية إذا لزم الأمر. إن هذه الشراكة بين البصيرة البشرية وسرعة الآلة تقدم حلاً قابلاً للتوسع لمراقبة صحة محيطاتنا، مما يضمن أنه بينما نبني المزيد من البنية التحتية في قاع البحر، يمكننا أيضاً أن نبقي عيناً دقيقة ويقظة على الحياة التي تسكنه.
ملخص تقني: التقدير الآلي لوفرة الأسماك من فصيلة "الجادويد" والأسماك المفلطحة باستخدام تصوير الفيديو ستيريو-BRUV عبر تقنية كشف الأجسام YOLO
بيان المشكلة تتطلب إدارة النظم البيئية البحرية مراقبة قوية لمعالجة الضغوط البشرية مثل الصيد الجائر، والتلوث، وانتشار البنية التحتية للطاقة المتجددة في عرض البحر. وبين أن مسوحات الفيديو عن بُعد باستخدام الطُعم (BRUV) توفر طريقة غير اجتياحية ومنخفضة التكلفة لتقييم مجموعات الأسماك، إلا أن فائدتها تظل مقيدة بالطبيعة الكثيفة للجهد اليدوي المطلوب في تحليل الفيديو. وهذا يخلق عنق زجاجة تحليلي، لا سيما مع نمو حجم البيانات إلى تيرابايتات. علاوة على ذلك، تعتمد التحليلات التقليدية لـ BRUV عادةً على منظور كاميرا واحدة فقط من الأنظمة الستيريو (ثنائية العدسات)، مما يؤدي إلى هدر بيانات قيمة محتملة من الكاميرا الثانية، والتي تُخصص تقليديًا لقياسات الطول. هناك حاجة إلى خطوط معالجة آلية وشاملة (end-to-end) يمكنها بفعالية تعداد أنواع محددة والاستفادة من القدرة الكاملة لأنظمة stereo-BRUV لتحسين حساسية تقديرات الوفرة.
المنهجية طوّر المؤلفون خط معالجة حوسبة رؤية حاسوبية شاملًا باستخدام إطار عمل كشف الأجسام (You Only Look Once - YOLOv8) لأتمتة تعداد فصائل "الجاديدي" (القد) و"البلورونيكتيفورميس" (الأسماك المفلطحة) في فيديوهات BRUV التي جُمعت من مزارع الرياح البحرية في شمال بحر الشمال.
جمع البيانات وتوسيمها: جُمعت بيانات الفيديو خلال مسوحات في عام 2022 (عدد 108 عمليات نشر) وعام 2024 (عدد 96 عملية نشر). استُخرجت بيانات التدريب من مسح عام 2022، وتحديدًا من "إطار MaxN" (الإطار الذي يحتوي على أكبر عدد من الأفراد) وكل إطار رقم 1000 بعده. تم توسيم ما مجموعه 2,709 صورة، تحتوي على 16,679 كائنًا. ولمعالجة عدم توازن الفئات، تم تجميع الأنواع في ثلاث فئات: 'Pleuronectiformes' (الأسماك المفلطحة)، و'Gadidae' (الجاديدي)، و'Benthic invertebrates' (اللافقاريات القاعية).
تطوير النموذج: استخدم المؤلفون عملية تحسين مكونة من مرحلتين. أولاً، أجرى بحث تقريبي لتقييم 41 توليفة من أحجام صور الإدخال (640×640 مقابل 1280×1280)، وبنيات النماذج (من YOLOv8n إلى YOLOv8x)، وهياكل بيانات التدريب. استخدم التكوين الأمثل صور إدخال بحجم 1280×1280 وإطار عمل YOLOv8s (الصغير). ثانيًا، تم إجراء ضبط للمعلمات الفائقة (hyperparameters) باستخدام خوارزمية جينية على مدار 100 دورة.
نهج التجميع (Ensemble Approach): للتخفيف من التباين الناتج عن التهيئة العشوائية للأوزان، تم تدريب نموذج تجميع مكون من خمسة نماذج متميزة باستخدام المعلمات الفائقة المُحسنة. أثناء الاستدلال، يتم حساب متوسط أعداد الكشوف من النماذج الخمسة لتحديد التقدير النهائي للوفرة لكل إطار.
تقدير MaxN: قام خط المعالجة بتحليل إطار واحد كل ثانيتين من الفيديو. تم تسجيل أقصى عدد من الكشوف لفئة معينة في أي إطار منفرد كـ MaxNYOLO.
مقاييس التقييم: تم حساب المقاييس القياسية (mAP، الدقة، الاستدعاء، RMSE، MAE). والأهم من ذلك، قدم المؤلفون مقياسًا مخصصًا، وهو متوسط نجاح الذروة (Mean Peak Success - MPS)، لتقييم دقة مستوى النشر. يحسب MPS نسبة التنبؤات التي تقع ضمن نطاق سماحية الخطأ المعتمد على الوفرة (يتراوح من 10% عند الوفرة المنخفضة إلى 20% عند الوفرة العالية). تم تحديد عتبة الثقة المثلى للنشر من خلال تعظيم معدل نجاح الذروة لكل نوع.
تحليل الرؤية الستيريو (Stereo Vision): تم تطبيق خط المعالجة على كل من منظوري الكاميرا اليسرى واليمنى لوحدات stereo-BRUV. قارن المؤلفون بين تقدير المنظور الواحد التقليدي (الكاميرا اليمنى) وبين مقياس max-MaxN، المعرف بأنه التقدير الأعلى للوفرة بين المنظورين لكل عملية نشر. استُخدمت الاختبارات الإحصائية (اختبارات t المزدوجة، واختبارات التبديل على معامل الاختلاف، واختبارات فريدمان) لتقييم الانحياز، والتباين، والحساسية للمسافة من قواعد التوربينات.
النتائج الرئيسية
أداء الكشف: حقق نموذج التجميع النهائي دقة كشف عالية، حيث بلغ متوسط الدقة المتوسطة (mAP) نحو 0.896±0.009 للجاديدي و 0.814±0.009 للأسماك المفلطحة.
تقدير الوفرة: أظهر MaxNYOLO توافقًا قويًا جدًا مع الحسابات البشرية التي قام بها الخبراء (MaxNHuman)، حيث تراوحت ارتباطات راندر سبيرمان (ρ) بين 0.955 و 0.987، ومعاملات التحديد (R2) من 0.874 إلى 0.987 عبر سنوات المسح المختلفة. أظهر النموذج انحيازًا سالبًا طفيفًا ومستمرًا (نقص في العد)، وكان أكثر وضوحًا في الأسماك المفلطحة عند الوفرة العالية، ويرجع ذلك على الأرجح إلى التداخل (occlusion).
فوائد الرؤية الستيريو: كش المقارنة بين المنظور الواحد (الكاميرا اليمنى) ونهج max-MaxN أن استخدام كلا المنظورين يقلل بشكل كبير من تباين تقديرات الوفرة (انخفاض معامل الاختلاف).
الحساسية الإحصائية: أظهر مقياس max-MaxN حساسية أكبر للمتغيرات التجريبية (المسافة من قواعد التوربينات) مقارنة بالمنظور الواحد. وبينما فشل المنظور الواحد في اكتشاف فروق ذات دلالة إحصائية في الوفرة عبر نطاقات المسافة لكلا النوعين، فقد كشف مقياس max-MaxN عن فروق ذات دلالة إحصائية لـ الأسماك المفلطحة (p=0.043) ولكن ليس للجاديدي (p=0.146). وأشار اختبار التبديل إلى أن الزيادة في حجم التأثير كانت ذات دلالة إحصائية فقط للأسماك المفلطحة (ΔW=0.092,p=0.003)، بينما لم يكن الفرق للجاديدي ذا دلالة (ΔW=0.061,p=0.114).
الكفاءة: قلل تنفيذ خط المعالجة الآلي الوقت المنقضي من انتهاء العمل الميداني إلى التقديرات النهائية لـ MaxN من 134 يومًا (عام 2022، يدويًا) إلى 68 يومًا (عام 2024، آليًا مع التحقق اليدوي).
الأهمية والادعاءات يزعم البحث أن خطوط معالجة كشف الأجسام المصممة خصيصًا يمكن أن تزيد بفعالية من كفاءة ونطاق التحليل للمراقبة القائمة على الفيديو في النظم البيئية البحرية ضمن مسوحات محددة. وتثبت الدراسة أن:
الأتمتة قابلة للتطبيق: يمكن لخطوط معالجة YOLO أتمتة تعداد أنواع الأسماك ذات الأهمية التجارية بدقة عالية، مما يحل محل التوسيم اليدوي جزئيًا في برامج المراقبة متعددة السنوات.
فائدة بيانات الستيريو: تجعل الأتمتة من العملي استخدام كلا المنظورين في أنظمة stereo-BRUV. إن نهج "max-MaxN"، الذي يختار العدد الأعلى من الكاميرتين، يزيد من حساسية تقديرات الوفرة للمتغيرات التجريبية ويقلل التباين، مما يحسن القدرة الإحصائية دون جهد ميداني إضافي.
ابتكار المقاييس: يوفر تقديم "متوسط نجاح الذروة" (MPS) إطار تقييم أكثر ملاءمة لبيانات BRUV من مقاييس الخطأ القياسية، لأنه يأخذ في الاعتبار طبيعة أخطاء العد المعتمدة على الوفرة (مثل التداخل).
سهولة الوصول: يعتمد سير العمل على أطر عمل مفتوحة المصدر، ويمكن تنفيذه على أجهزة متوسطة المدى (NVIDIA RTX A4000)، مما يوفر مسارًا أقل تكلفة للباحثين لتبني التحليل الآلي، بشرط الاستثمار في عملية توسيم بيانات التدريب الأولية.
يتبنى المؤلفون موقفًا متواضعًا، مشيرين إلى أنه بينما تكون الطرق الآلية فعالة للأنواع الوفيرة في برامج المراقبة متعددة السنوات، يظل المنسقون البشريون هم المعيار للدقة المطلقة. كما يقرون بأن النماذج مصممة لظروف محددة، وأن تحديد الأنواع على مستوى النوع كان محدودًا بسبب توفر بيانات التدريب، مما يشير إلى أن التعميم الأوسع قد يتطلب نماذج تأسيسية (foundation models) أكثر ضخامة أو جهود توسيم أكثر شمولاً.