← أحدث الأبحاث
💻 computer science

AdaFuse: a cross-modal image fusion algorithm based on negative value calibration and adaptive hierarchical activation

تعد AdaFuse خوارزمية لدمج الصور متعددة الوسائط تعالج عدم توازن الميزات وعدم كفاءة الحوسبة من خلال دمج معايرة القيم السالبة لاختيار الانتباه الدقيق مع استراتيجية تنشيط هرمية تكيفية لتخصيص الموارد الديناميكي، محققةً جودة دمج وكفاءة فائقتين في مهام دمج الصور المرئية وتحت الحمراء.

المؤلفون الأصليون: Yongxin Wang, Yan Yang, Jiaqi Yuan, Qinghua Liu, Baoyuan Chen

نُشر 2026-09-08
📖 3 دقيقة قراءة☕ قراءة في استراحة قهوة

المؤلفون الأصليون: Yongxin Wang, Yan Yang, Jiaqi Yuan, Qinghua Liu, Baoyuan Chen

البحث الأصلي مرخَّص بموجب CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل

في عالم الرؤية الحاسوبية، غالبًا ما تجد الآلات صعوبة في رؤية العالم كما يراه البشر، لا سيما عندما يخبو الضوء أو تسوء الأحوال الجوية. ولحل هذه المشكلة، دمج العلماء منذ فترة طويلة نوعين مختلفين من مستشعرات الكاميرا: أحدهما يرى العالم المرئي بالألوان والنسيج، والآخر يكتشف الحرارة غير المرئية المنبعثة من الأجسام. والهدف هو دمج هذين المنظورين في صورة واحدة تقدم أفضل ما في العالمين: التفاصيل الغنية للصورة النهارية والقدرة على رصد جسم دافئ في الظلام الدامس. ومع ذلك، فإن مجرد دمج هاتين الصورتين أمر صعب؛ فعندما تحاول الحواسيب دمجهما، غالبًا ما تتسرب حرارة شخص أو سيارة إلى الخلفية المحيطة، مما يخلق هالة ضبابية متوهجة تحجب التفاصيل. علاوة على على ذلك، فإن الرياضيات المعقدة المطلوبة لإصلاح هذه المشكلات تتطلب قدرًا كبيرًا من القوة الحوسبية، مما يبطئ التطبيقات التي تعمل في الوقت الفعلي، ويجعل هذه التكنولوجيا غير عملية للعديد من الاستخدامات.

لقد طور الباحثون في جامعة هاربين للعلوم والتكنولوجيا طريقة جديدة تسمى "AdaFuse" لمعالجة هذه المشكلات المحددة. يركز نهجهم على طريقة أكثر ذكاءً للتعامل مع البيانات حتى قبل دمجها. فبدلاً من معاملة كل جزء من الصورة بنفس الجهد الحوسبي الثقيل، يقوم النظام الجديد أولاً بتحليل الصورة المرئية لمعرفة أي أجزائها بسيطة وأيها معقدة. فإذا كان القسم من الصورة بسيطًا، يعالجه النظام بسرعة عبر مسار ضحل. أما إذا كان القسم يحتوي على تفاصيل معقدة أو تغيرات كبيرة في الألوان، فيتم توجيهه إلى مسار معالجة أعمق وأكثر كثافة. وتسمح هذه الاستراتيجية التكيفية للكمبيوتر بتوفير الطاقة عبر عدم الإفراط في العمل على الأجزاء البسيطة من الصورة، مع تخصيص الموارد اللازمة للمناطق المعقدة التي تحتاج إلى عناية دقيقة.

يعد أسلوب المعايرة الذي يعمل كحد فاصل دقيق أحد الابتكارات الرئيسية في هذا العمل؛ حيث يحدد الأجزاء الأكثر سخونة في الصورة ثم يثبط الإشارة عمدًا في المنطقة المجاورة لها مباشرة. ومن خلال القيام بذلك، يضمن النظام بقاء الهدف الحراري ساطعًا ومتميزًا، بينما تظل الخلفية حادة وحقيقية لمظهرها الأصلي. وهذا يمنع الهالات الاصطناعية التي غالبًا ما تجعل الصور المدمجة تبدو غير طبيعية أو ضبابية.

ولضمان أن تبدو النتيجة النهائية جيدة لكل من الآلات والبشر، قام الباحثون أيضًا ببناء نظام تدريب متخصص. يعمل هذا النظام كحكم صارم، حيث يتحقق من الصورة المدمجة مقابل المصادر الأصلية للتأكد من عدم فقدان أو تشويه أي تفاصيل مهمة. وهو يولي اهتمامًا وثيقًا للحواف والنسيج، مما يضمن بقاء خطوط المبنى أو أوراق الأشجار حادة وواضحة. وقد اختبر الفريق طريقتهم على مجموعات بيانات عامة تحتوي على آلاف أزواج الصور الملتقطة في ظروف متنوعة، من الأيام الصافية إلى الليالي الضبابية. وأظهرت النتائج أن نهجهم لم ينتج صورًا أكثر وضوحًا وتحسنًا في التباين فحسب، بل فعل ذلك أيضًا بسرعة أكبر بكثير من العديد من الطرق الموجودة. وفي المتوسط، عالج النظام الجديد صورة في غضون 0.0065 ثانية فقط، وهي سرعة تجعل استخدامه ممكنًا في الوقت الفعلي.

وكشفت التجارب أن هذه الطريقة بارعة بشكل خاص في موازنة نوعي المعلومات. ففي الاختبارات التي عانت فيها الطرق الأخرى مع توازن الألوان أو تسببت في الكثير من الضجيج، حافظت "AdaFuse" على مظهر طبيعي مع إبراز الأهداف الحرارية. فعلى سبيل المثال، في المشاهد التي تحتوي على دخان أو إضاءة منخفضة، نجح النظام في إبراز المشاة والمركبات دون فقدان التفاصيل الهيكلية للبيئة. ووجد الباحثون أنهم من خلال التحكم بعناية في كيفية انتشار معلومات الحرارة، تمكنوا من تحقيق مستوى من التفاصيل والوضوح لا تستطيع الطرق السابقة مضاهاته. ويشير هذا العمل إلى أنه من خلال كوننا أكثر انتقائية بشأن كيفية وأين نطبق القوة الحوسبية، ومن خلال التحكم الصارم في كيفية تفاعل البصمات الحرارية مع الخلفية، يمكننا إنشاء صور مدمجة تكون غنية بالمعلومات وموثوقة بصريًا في آن واحد.

غارق في أبحاث مجالك؟

تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.

جرّب Digest →