A 3-D Log-Gabor Feature Similarity Index for Quality Assessment of Pansharpened Images
تقترح هذه الورقة مؤشر تشابه ميزات "لوج-جابور" ثلاثي الأبعاد (3-D Log-Gabor Feature Similarity Index) جديداً يوسع مقياس FSIM لتقييم الجودة المكانية والطيفية للصور المعالجة بالتحسين الطيفي (pansharpened images) في آن واحد من خلال دمج مبادئ النظام البصري البشري والعلاقات بين النطاقات، مما يظهر أداءً فائقاً على الطرق الحالية.
تخيل أنك تنظر إلى الأرض من الفضاء. يمتلك العلماء طريقتين رئيسيتين لالتقاط الصور: إحداهما تمنحك رؤية باللونين الأبيض والأسود فائقة الوضوح تُظهر كل شق في الطريق، لكنها مملة لعدم وجود ألوان فيها. والأخرى تمنحك رؤية نابضة بالألوان للغابات والمدن، لكنها ضبابية قليلاً، كأنك تنظر من خلال نافذة مغطاة بالضباب. وللحصول على أفضل ما في العالمين، يستخدم العلماء حيلة تسمى "التحسين البانشارب" (pansharpening). الأمر يشبه أخذ تلك الصورة الملونة الضبابية واستخدام الصورة الحادة باللونين الأبيض والأسود لملء التفاصيل المفقودة، مما يخلق خريطة ملونة عالية الدقة لكوكبنا.
لكن الجزء الصعب هنا هو: بمجرد دمج هاتين الصورتين معاً، كيف تعرف ما إذا كنت قد أبليت بلاءً حسناً؟ هل جعلت العشب يبدو أرجوانياً عن طريق الخطأ؟ هل جعلت حواف المباني ضبابية؟ عادةً، ستحتاج إلى صورة ملونة "أصلية" عالية الدقة لتقارن بها، ولكن في الواقع، هذه الصورة المثالية غير موجودة. لذا، يتعين على العلماء ابتكار برامج كمبيوتر تعمل مثل العين البشرية، تحاول تخمين ما إذا كانت الصورة الجديدة تبدو طبيعية وحادة. هذا هو عالم "تقييم جودة الصور" (IQA)، وهو مجال مخصص لتعليم الحواسيب كيفية الحكم على الجمال والوضوح، تماماً كما نفعل نحن.
في هذه الورقة البحثية، يقدم فريق من الباحثين من جامعة "تربيعت مودارس" طريقة جديدة وأكثر ذكاءً لتقييم صور الفضاء المدمجة هذه. أطلقوا على أداتهم الجديدة اسم "مؤشر تشابه الميزة بمرشح لوغ-غابور ثلاثي الأبعاد"، أو اختصاراً "3-D FSIM". فكر في الطرق القديمة كمعلم يصحح مقال طالب عبر التحقق من إملاء كل كلمة على حدة، متجاهلاً كيفية تدفق الجمل معاً. أما "3-D FSIM" الجديد فهو مثل المعلم الذي يقرأ القصة بأكملها دفعة واحدة، مدركاً كيف تعمل الكلمات (الألوان) والبنية (الأشكال) معاً في ثلاثة أبعاد.
قام الباحثون ببناء هذه الأداة عبر تطوير طريقة موجودة بالفعل تسمى "FSIM"، والتي كانت جيدة بالفعل في تقييم الصور العادية. يبحث نظام "FSIM" الأصلي عن "التوافق الطوري" (وهي طريقة معقدة لقول "أين توجد الحواف والزوايا") و"مقدار التدرج" (مدى حدة التباين). ومع ذلك، كان الإصدار القديم يعامل كل نطاق لوني (مثل الأحمر والأخضر والأزرق) كعالم منفصل ومعزول. أما النسخة الجديدة ثلاثية الأبعاد فتدرك أن هذه الألوان في صور الأقمار الصناعية هي أصدقاء مقربون؛ فهي تتواصل مع بعضها البعض. ومن خلال استخدام "مرشحات لوغ-غابور ثلاثية الأبعاد" الخاصة — والتي تعمل مثل مجموعة من الشباك ثلاثية الأبعاد التي تصطاد التفاصيل عبر الفضاء واللون في آن واحد — يمكن للمقياس الجديد رؤية الصورة الكاملة، وليس مجرد شرائح منفصلة.
اختبر الفريق مسطرتهم الجديدة مقابل قاعدة بيانات تضم 1ما 176 صورة تم تقييمها من قبل مراقبين بشريين حقيقيين. وقارنوا درجات "3-D FSIM" الخاصة بهم بـ "متوسط درجات الرأي" (متوسط التقييمات التي منحها البشر). كانت النتائج مبهرة: فقد اتفق المقياس الجديد مع الحكام البشر أكثر من أي طريقة أخرى موجودة، بما في ذلك "FSIM" الأصلي وأدوات شائعة أخرى مثل "SSIM". وفي الواقع، عندما نظروا إلى مدى مطابقة ترتيب الكمبيوتر للترتيب البشري، سجل "3-D FSIM" درجة 0.782 (SROCC)، متفوقاً على أفضل طريقة تالية التي سجلت 0.755. كما ارتكب أخطاءً أقل في التنبؤ بمدى استياء البشر من صورة مشوهة.
تجادل الورقة البحثية صراحةً ضد فكرة أنه يمكنك فقط فحص كل نطاق لوني على حدة ثم حساب المتوسط. لقد أظهروا أن نهج "النطاق تلو الآخر" هذا يفتقد العلاقات الحاسمة بين الألوان، مما يؤدي إلى درجات جودة غير دقيقة. وبدلاً من ذلك، تشير نتائجهم إلى أن معاملة الصورة ككتلة ثلاثية الأبعاد موحدة هو المفتاح للتقييم الدقيق. وبينما لا تدعي الورقة أنها حلت كل مشاكل الكون، إلا أن البيانات تشير بقوة إلى أن هذا النهج ثلاثي الأبعاد الجديد يمثل خطوة كبيرة للأمام، حيث يوفر طريقة أكثر موثوقية و"شبهاً بالبشر" لضمان أن تكون خرائط الأقمار الصناعية لدينا واضحة وملونة كما ينبغي أن تكون.
بيان المشكلة لا يزال تقييم جودة الصور المدمجة (Pansharpened) يمثل تحدياً كبيراً في الاستشعار عن بُعد، ويرجع ذلك أساساً إلى عدم توفر صورة متعددة الأطياف عالية الدقة (HRMS) للمرجعية لإجراء تقييم كامل النطاق. غالباً ما تقوم مقاييس تقييم جودة الصور (IQA) الحالية بتقييم الخصائص الطيفية والمكانية بشكل منفصل، مما يؤدي إلى الفشل في مراعاة العلاقات البينية بين النطاقات المتأصلة في البيانات متعددة الأطياف. علاوة على ذلك، تعتمد العديد من المقاييس التقليدية على الاختلافات على مستوى البكسل التي لا تتوافق جيداً مع النظام البصري البشري (HVS)، وهو نظام حساس للأنماط الهيكلية، والحواف، والأنسجة، بدلاً من مجرد قيم الكثافة الخام. وبينما ظهرت نهج التعلم العميق، إلا أنها قد تعاني من تكرار الميزات ودوال الفقد التي تتجاهل العلاقات بين نتائج الدمج. وبناءً على ذلك، هناك حاجة إلى مقياس ذي صلة إدراكياً يقوم بتحليل المعلومات المكانية والطيفية في آن واحد ضمن إطار عمل موحد.
ترشيح لوج-غابور ثلاثي الأبعاد (3-D Log-Gabor Filtering): على عكس النهج التقليدية التي تعالج النطاقات الطيفية بشكل مستقل، يستخدم النهج المقترح مجموعة من مرشحات "لوج-غابور" ثلاثية الأبعاد. تعمل هذه المرشحات عبر الأبعاد المكانية (x, y) والطيفية (z) في وقت واحد. يتم تعريف دالة نقل المرشح بواسطة مقدار التردد الشعاعي والاتجاه الزاوي (الارتفاع والسمت)، مما يسمح باستخراج الميزات الهيكلية التي تلتقط التفاصيل المكانية والارتباطات الطيفية معاً.
استخراج الميزات:
التوافق الطوري ثلاثي الأبعاد (3-D PC): يتم حسابه من خلال تحليل الاستجابات المتماثلة زوجياً والفردية لمرشحات "لوج-غابور" ثلاثية الأبعاد عبر مقاييس واتجاهات متعددة. يحدد التوافق الطوري (PC) الهياكل ذات الأهمية الإدراكية (الحواف، والزوايا) وهو ثابت تجاه التغيرات في السطوع أو التباين.
مقدار التدرج ثلاثي الأبعاد (3-D GM): يتم حسابه باستخدام مؤثرات تدرج ثلاثية الأبعاد محددة لالتقاط تغيرات الكثافة المحلية والتباين، مما يكمل المعلومات الهيكلية التي يوفرها التوافق الطوري (PC).
حساب التشابه: يحسب المقياس التشابه بين الصورة المرجعية (أو الصورة الأصلية منخفضة الدقة متعددة الأطياف MS) والصور المشوهة (المدمجة/Pansharpened). وبدلاً من حساب متوسط الدرجات لكل نطاق على حدة، يعامل النهج استجابات الميزات في كل موقع مكاني كمتجهات على طول البعد الطيفي. يتم إنشاء خرائط التشابه لـ PC وGM باستخدام الضرب الاتجاهي (Vector Inner Products) والمعايير الإقليدية.
التجميع (Pooling): يتم الحصول على درجة الجودة النهائية عن طريق تجميع خرائط التشابه المحلية، الموزونة باستجابة أقصى توافق طوري. يضمن ذلك أن المناطق ذات الأهمية الإدراكية تساهم بشكل أكبر في الدرجة النهائية.
المساهمات الرئيسية
الإطار ثلاثي الأبعاد: المساهمة الأساسية هي توسيع مقياس FSIM إلى إطار عمل ثلاثي الأبعاد. هذا يلغي الحاجة إلى الحساب المستقل لكل نطاق على حدة ثم حساب المتوسط، مما يحافظ على الارتباطات الطيفية البينية ويستغلها.
المواءمة الإدراكية: من خلال استخدام مرشحات "لوج-غابور" ثلاثية الأبعاد لاستخراج PC وGM، يتوافق المقياس بشكل وثيق مع الإدراك البشري (HVS)، مع التركيز على الميزات الهيكلية والنسيجية بدلاً من مجرد فروق البكسل البسيطة. টি التقييم الموحد: يوفر المنهج درجة واحدة تقيم في آن واحد الدقة المكانية والاتساق الطيفي، مما يعالج أوجه القصور في المقاييس التي تقيم هذه الخصائص بشكل منعزل.
النتائج والأداء تم تقييم المقياس المقترح باستخدام قاعدة بيانات لصور IKONOS المدمجة المستمدة من أربعة مناطق متميزة (Coliseum, Road, Urban, River). تضمنت مجموعة البيانات صوراً تم دمجها عبر ست تقنيات مختلفة (فئات MRA وCS) وخضعت لتشوهات متنوعة (الضبابية والضوضاء البيضاء المضافة ذات التوزيع الطبيعي). تمت مقارنة الأداء مع درجات الرأي المتوسط (MOS) والدرجات التفاضلية (DMOS) الذاتية المقدمة من المراقبين البشر.
مقاييس الارتباط: حقق 3-D FSIM أعلى ارتباط مع الدرجات الذاتية بين جميع المقاييس المختبرة. وتحديداً، تفوق على الأساليب الحالية المتطورة (بما في ذلك SAM، وERGAS، وUIQI، وQ4، وSSIM، و2-D FSIM الأصلي) في معامل ترتيب سبيرمان (SROCC: 0.782)، ومعامل ترتيب كيندال (KROCC: 0.574)، ومعامل ارتباط بيرسون الخطي (PLCC: 0.853).
مقاييس الخطأ: أظهر النهج المقترح أدنى جذر لمتوسط مربع الخطأ (RMSE) وقدره 4.471، مما يشير إلى أدنى قدر من الانحراف عن التقييمات البشرية الذاتية.
اتساق التصنيف: في دراسات الحالة التي شملت طرق دمج محددة (مثل PCA، وATWT، وBDSD، وPNN)، طابقت تصنيفات 3-D FSIM بدقة الحقيقة الأرضية القائمة على DMOS، مما أظهر اتفاقاً فائقاً مقارنة بمقاييس مثل SAM وQNR وDs، التي أظهرت انحرافات كبيرة.
الأهمية الإحصائية: أكدت اختبارات F أن ميزة الأداء لـ 3-D FSIM على معظم المقاييس المنافسة هي ميزة ذات دلالة إحصائية عند مستوى ثقة 95%.
الأهمية والادعاءات يزعم المؤلفون أن مقياس 3-D FSIM يوفر أداة أكثر قوة وموثوقية واتساقاً إدراكياً لتقييم جودة الصور المدمجة. ومن خلال دمج المعلومات المكانية والطيفية عبر إطار عمل "لوج-غابور" ثلاثي الأبعاد، يلتقط المقياس بفعالية التشوهات التي تؤثر على كل من التفاصيل الهيكلية والاتساق الطيفي. وتؤكد الورقة أن هذا النهج يتغلب على قيود التقييم لكل نطاق على حدة، ويقدم بديلاً متفوقاً لمقاييس IQA الحالية لتقييم جودة عملية الدمج (Pansharpening) في حالات عدم توفر صورة مرجعية عالية الدقة.