Generalising Hybrid OUR-Net -U-Net for Accurate Identification and Multi-Domain Structural Crack Segmentation Using Refinement Techniques
تقترح هذه الورقة إطار عمل تحت إشراف ضعيف يستفيد من التسميات التوضيحية على مستوى الصورة لتوليد أقنعة وهمية منقحة عبر تقنيتي CAM وGrad-CAM، والتي تُستخدم بعد ذلك لتدريب نموذج هجين (OUR-Net–U-Net) لتجزئة الشقوق الهيكلية بدقة عبر نطاقات متعددة، مع تقليل تكاليف التوسيم بشكل كبير وتحقيق أداء متفوق مقارنة بالطرق الحالية.
تعتمد كل جسر ومبنى وطريق على سلامة غلافه الخرساني. وعندما يتشقق هذا الغلاف، فإنه غالباً ما يكون العلامة المرئية الأولى على أن الهيكل يتقادم، أو يعاني من وزن زائد، أو يستسلم للعوامل الجوية. وإذا مرت هذه الشقوق دون ملاحظة، فقد تتوسع، مما يسمح للمياه والحطام بالتغلغل في العمق، مما يؤدي في النهاية إلى زعزعة سلامة الهيكل بأكمله. لعقود من الزمن، كانت الطريقة الوحيدة للعثور على هذه الشقوق هي من خلال عيون المفتشين البشر، الذين كانوا يسيرون على طول الجسر أو يتسلقون جانب البرج، ويحدقون في الأسطح لرصد الكسور الشعرية. هذه الطريقة بطيئة، ومكلفة، وعرضة للخطأ البشري، حيث يمكن للإرهاق والأحكام الذاتية أن يتسببا في تفويت أكثر المفتشين خبرة لخلل حرج.
في السنوات الأخيرة، توجه المهندسون إلى الحواسيب للمساعدة في هذه المهمة، باستخدام الذكاء الاصطناعي لمسح صور الخرسانة وتحديد الأضرار. ومع ذلك، فإن تعليم الكمبيوتر كيفية رؤية الشق أمر صعب بشكل مفاجئ. لكي يتعلم، تحتاج هذه البرامج الحاسوبية عادةً إلى آلاف الأمثلة حيث يتم تتبع كل بكسل من بكسلات الشق يدوياً بواسطة إنسان. هذه العملية مجهدة للغاية لدرجة أنها تخلق عنق زجاجة؛ إذ غالباً لا يستطيع الباحثون جمع ما يكفي من البيانات المصنفة لتدريب أنظمتهم بفعالية. التحدي، إذن، كان بناء نظام يمكنه العثور على الشقوق بدقة عالية دون الحاجة إلى جيوش من الناس لرسمها بكسلاً تلو الآخر.
لقد طور باحث نهجاً جديداً يسد هذه الفجوة، حيث يجمع بين نوعين مختلفين من الذكاء الاصطناعي للكشف عن الشقوق الهيكلية بدقة أكبر وجهد يدوي أقل بكثير. يبدأ نهجهم، الذي يسمونه الإطار الهجين، بتعليم الكمبيوتر ببساطة التعرف على ما إذا كانت الصورة تحتوي على شق أم لا، وهي مهمة تتطلب فقط تسمية بسيطة بـ "نعم" أو "لا" بدلاً من رسم تفصيلي. وبمجرد أن يفهم الكمبيوتر كيف يبدو الشق بشكل عام، يستخدم الباحث تقنية تسلط الضوء على المناطق المحددة في الصورة التي أقنعت الكمبيوتر باتخاذ هذا القرار. هذه المناطق المظللة، والتي تعمل كمسودة خشنة للضرر، يتم بعد ذلك تنقيحها وتنظيفها باستخدام قواعد رياضية لتنعيم الأخطاء وربط الخطوط المقطوعة.
تُستخدم هذه المسودة المنقحة لتدريب نموذج حاسوبي ثانٍ أكثر تطوراً مصمم خصيصاً لرسم حدود دقيقة. هذا النموذج الثاني مبني لفهم كل من الشكل العام للشق وتفاصيله الصغيرة والمعقدة، مما يسمح له بالتمييز بين الكسر الحقيقي وبين الظل أو البقعة على الخرسانة. اختبر الباحث هذا النظام على مجموعة من الصور الواقعية لأسطح خرسانية، مقارناً أداءه بالطرق الأخرى الموجودة. ووجد أن نهجه نجح في تحديد الشقوق بدقة إجمالية بلغت 85 بالمائة. والأهم من ذلك، أنه من خلال الاعتماد على المسودات الخشنة الأولية بدلاً من الرسومات البشرية المثالية، قلل النظام من مقدار العمل اليدوي المطلوب للتصنيف بنسبة 39 بالمائة.
أظهرت النتائج أن النظام كان جيداً بشكل خاص في التعامل مع أنواع مختلفة من الأضرار، من الكسور الواسعة والواضحة إلى الشقوق الشعرية الرقيقة جداً التي غالباً ما تغفلها الطرق الأخرى. كما استخدم الباحث التحليل الإحصائي للتأكد من أن ثقة الكمبيوتر في نتائجها كان متسقاً عبر أنواع مختلفة من الشقوق، حيث أظهر النظام أعلى درجات اليقين عندما كان الضرر شديداً وأدنى درجاتها عندما كانت الشقوق بالكاد مرئية. وبينما لا يعد النظام مثالياً ولا يزال يتطلب بعض الضبط للتعامل مع ظروف الإضاءة الأكثر صعوبة، إلا أنه يقدم مساراً عملياً للمضي قدماً في مراقبة صحة بنيتنا التحتية. ومن خلال جعل عملية الكشف أسرع وأقل اعتماداً على العمالة البشرية المكلفة، يمكن لهذا الأسلوب أن يساعد المهندسين على فحص المزيد من الهياكل بشكل أكثر تكراراً، مما يضمن بقاء الجسور والمباني آمنة قبل وقت طويل من تحول شق صغير إلى فشل كبير.
ملخص تقني: تعميم نموذج Hybrid OUR-Net-U-Net لتحديد دقيق وتجزئة الشقوق الهيكلية متعددة المجالات باستخدام تقنيات التحسين
بيان المشكلة تعد الشقوق الهيكلية في البنية التحتية المدنية (الجسور، المباني، الأرصفة) مؤشرات حرجة لاحتمالية الفشل. وبينما يظل الفحص اليدوي هو المعيار التقليدي، إلا أنه يتطلب جهداً مكثفاً، ويتسم بالذاتية، وعرضة للخطأ البشري، لا سيما عند العمل على نطاق واسع. لقد حسنت نماذج التجزئة القائمة على التعلم العميق من عملية الكشف، لكنها تعتمد عادةً على التعلم الخاضع للإشراف الكامل، مما يتطلب توصيفات دقيقة على مستوى البكسل (pixel-level annotations) تكون مكلفة، ومستهلكة للوقت، وواسعة النطاق. كما أن الطرق الحالية ضعيفة الإشراف غالباً ما تنتج خرائط تحديد مكان خشنة تفتقر إلى دقة الحدود المطلوبة للتجزئة الدقيقة. علاوة على ذلك، تعاني العديد من النماذج من صعوبة في التعميم عبر أنماط الشقوق المتنوعة (اختلاف العرض، الاتجاه، والتباين) وتكون حساسة للضوضاء البيئية، وتغيرات الإضاءة، وقوام الأسطح.
المنهجية يقترح البحث إطار عمل ضعيف الإشراف يسد الفجوة بين تصنيف مستوى الصورة وتجزئة كثيفة على مستوى البكسل. تتكون المنهجية من مسار عمل مكون من ست مراحل:
الحصول على البيانات: تستخدم الدراسة مجموعة بيانات عامة لشقوق الخرسانة تحتوي على 802 صورة ذات أنماط شقوق، وقوام أسطح، وظروف إضاءة متنوعة. تم تقسيم البيانات بنسبة 80:20 للتدريب والاختبار.
المعالجة المسبقة: تخضع الصور لإعادة تغيير الحجم، والتقييس (normalization)، وتعزيز البيانات (الدوران، القلب) لتعزيز اتساق الميزات والمتانة. تم استقصاء التقنيات التقليدية مثل عتبة "أوتسو" (Otsu thresholding) وكشف الحواف كقواعد مرجعية، ولكن تم استخدامها بشكل أساسي في المعالجة المسبقة لتعزيز رؤية الشقوق.
توليد الأقنعة الزائفة (Hybrid U-Net): بدلاً من التوسيم اليدوي للبكسل، يقوم إطار العمل بتدريب مصنف شبكة عصبية تلافيفية (CNN) باستخدام تسميات مستوى الصورة فقط (وجود شق أو عدم وجوده). ثم يستخدم خرائط تنشيط الفئات (CAM) و(Grad-CAM) لتوليد خرائط حرارية خشنة لتحديد المواقع. يتم دمج هذه الخرائط باستخدام علاقة ثنائية الحدين الموزونة وتتم تهذيبها من خلال قيود الاتساق المكاني والعمليات المورفولوجية لإنشاء "أقنعة زائفة" عالية الجودة.
التجزئة (OUR-Net): تعمل الأقنعة الزائفة الناتجة كإشراف لتدريب بنية OUR-Net الهجينة. وعلى عكس نماذج U-Net القياسية، يستخدم OUR-Net التلافيف الثمانية (Octave Convolutions) لتفكيك خرائط الميزات إلى مكونات عالية التردد (حواف الشقوق، التفاصيل الدقيقة) ومنخفضة التردد (الهيكل العام، الاستمرارية). يسمح هذا للشبكة بالتقاط الشقوق الشعرية الدقيقة والشقوق الهيكلية الأعرض في آن واحد. يستخدم فك التشفير (decoder) تقنية "Octave Max Unpooling (OMU)" لإعادة بناء المعلومات المكانية بدقة.
التهذيب: يتم معالجة خرائط الاحتمالية الخام الناتجة عن OUR-Net باستخدام العتبة (thresholding)، والعمليات المورفولوجية (التآكل، التمدد، الفتح، الإغلاق) لإزالة الضوضاء وملء الفجوات، بالإضافة إلى الهيكلة (skeletonization) لتقليص مناطق الشقوق إلى خطوط مركزية بكسلية واحدة لتحسين التمثيل الطوبولوجي.
التصور المرئي: يتم وضع القناع النهائي المهذب فوق الصورة الأصلية للتقييم الهيكلي.
المساهمات الرئيسية
إطار عمل ضعيف الإشراف: دمج تقنيات CAM/Grad-CAM مع Hybrid U-Net لإنتاج أقنعة زائفة، مما يقلل الاعتماد على التوصيف بنسبة تقارب 39% مقارنة بالطرق الخاضعة للإشراف الكامل.
بنية هجينة: الجمع بين عمود فقري للتصنيف لتحديد المواقع ونموذج تجزئة OUR-Net الذي يستفيد من التلافيف الثمانية للتعامل مع ميزات الشقوق متعددة الترددات (الشقوق الرفيعة والعريضة معاً).
مسار التهذيب: تنفيذ مجموعة شاملة من معالجة ما بعد التجزئة تشمل العتبة، والعمليات المورفولوجية، والهيكلة لتحسين استمرارية الشقوق وإزالة الإيجابيات الكاذبة.
التحقق الإحصائي: إجراء تحليل إحصائي صارم لثقة النموذج باستخدام فترات ثقة 95% عبر مستويات مختلفة من شدة الشقوق (من "خفيف جداً" إلى "شديد").
النتائج تم تقييم إطار العمل المقترح مقابل نماذج متطورة خاضعة للإشراف الضعيف والإشراف الكامل (بما في ذلك OUR-Net-CAM، وOUR-Net-GradCAM، وDeepLabV3، وSegNet) باستخدام مقاييس قياسية: الدقة (Accuracy)، الدقة المحددة (Precision)، الاستدعاء (Recall)، معامل دايس (Dice Coefficient)، ومعامل التقاطع فوق الاتحاد (IoU).
الأداء: حقق نموذج Hybrid OUR-Net-U-Net المقترح دقة تصنيف إجمالية بلغت 85% (تحديداً 0.8489 في قسم النتائج)، ومعامل دايس قدره 0.72، وIoU قدره 0.55.
المقارنة: تفوق النموذج على النماذج المرجعية الأخرى ضعيفة الإشراف. فعلى سبيل المثال، حقق تحديد المواقع القائم على CAM القياسي IoU قدره 0.52، بينما حسنت الطريقة المقترحة هذه القيمة إلى 0.55.
تحليل الثقة: كشف التحليل الإحصائي أن ثقة التنبؤ تزداد مع شدة الشقوق. أظهرت الشقوق "الشديدة" متوسط ثقة قدره 0.8423 مع فترات ثقة ضيقة، بينما كانت الشقوق "الخفيفة جداً" ذات ثقة أقل (0.8199) وفترات ثقة أوسع، مما يعكس الصعوبة المتأصلة في اكتشاف الميزات الدقيقة ومنخفضة التباين.
كفاءة التوصيف: تسلط الدراسة الضوء على وجود مقايضة حيث يحقق النهج المقترح أداءً تنافسياً مع تقليل الوقت والتكلفة المرتبطين بإعداد مجموعة البيانات بشكل كبير.
الأهمية والادعاءات يزعم البحث أن هذا الإطار يوفر حلاً فعالاً وقابلاً للتوسع للمراقبة الآلية للصحة الهيكلية. ومن خلال تقليل الاعتماد على التوصيفات الدقيقة لمستوى البكسل المكلفة، يجعل هذا الأسلوب النشر واسع النطاق في الواقع أكثر جدوى. ويؤكد المؤلف أن دمج تقنيات الذكاء الاصطناعي القابل للتفسير (CAM/Grad-CAM) مع التجزئة المتقدمة (OUR-Net) يعالج بفعالية قيود التحديد الخشن للمواقع في التعلم ضعيف الإشراف. كما أن تضمين التهذيب المورفولوجي والهيكلة يعزز قدرة النظام على تحديد وقياس الشقوق الدقيقة، والتي غالباً ما تغفلها نماذج التجزئة القياسية. وتخلص الدراسة إلى أنه بينما قد تقدم النماذج الخاضعة للإشراف الكامل دقة أعلى قليلاً بسبب وجود الحقيقة الأرضية (ground truth) الدقيقة، فإن النهج ضعيف الإشراف المقترح يقدم توازناً عملياً بين موثوقية الكشف وتكلفة التوصيف، مما يجعله مناسباً للتقييم الهيكلي الآلي واسع النطاق.