HonestFace: Towards Honest Face Restoration with One-Step Diffusion Model
تقدم الورقة البحثية HonestFace، وهو نموذج انتشار بـخطوة واحدة لترميم الوجوه يستفيد من مدمج هوية، ومحاذاة وجه مقنعة، ومجموعة بيانات متعددة المراجع جديدة لتحقيق إعادة بناء عالية الدقة وأصيلة مع اتساق فائق في الهوية مقارنة بالأساليب الرائدة.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أنك تحاول إصلاح صورة ضبابية ومخدوشة لصديقك المفضل التُقطت في حفلة موسيقية مزدحمة. تريد جعلها تبدو حادة وواضحة من جديد، لكن لديك مشكلة: الصورة الأصلية تالفة للغاية لدرجة أن الكمبيوتر لا يعرف كيف تبدو عينا صديقك حقاً، أو ما إذا كان لديه شامة صغيرة بالقرب من فمه. إذا قام الكمبيوتر بمجرد التخمين، فقد يمنح صديقك عينين زرقاوين بينما هما بنيتان، أو ينعم بشرته حتى تبدو كالبلاستيك. هذا هو عالم "ترميم الوجوه" (face restoration)، وهو فرع من علوم الحاسوب يحاول فيه الآلات إصلاح الصور التالفة. لسنوات، بنى العلماء أدوات لشحذ هذه الصور، ولكن هناك عقبة: العديد من هذه الأدوات متحمسة للغاية لإرضاء المستخدم؛ فهي تخترع تفاصيل جديدة تبدو جميلة ولكنها ليست حقيقية للشخص الموجود في الصورة. قد تجعل الوجه يبدو مثالياً، لكنه يتوقف عن كونه يشبه صديقك ويبدأ في الظهور كشخص غريب، مثالي ومنمق بشكل عام. السؤال الكبير هو: كيف نصلح صورة مكسورة دون الكذب بشأن ما يبدو عليه الشخص حقاً؟
إليك HonestFace، وهي طريقة جديدة طورها باحثون في جامعة شانغهاي جياوتونغ وشركة vivo تهدف إلى أن تكون "صادقة القول" في ترميم الصور. فكر في معظم أدوات ترميم الوجوه الحالية ككاتب مبدع، عندما يُطلب منه إنهاء قصة، يخترع نهاية سعيدة لا تناسب الشخصيات. أما HonestFace، فهي تشبه المؤرخ الصارم الذي يرفض اختراع الحقائق. إنها تستخدم عملية "خطوة واحدة" خاصة للنظر في صورة ضبابية ومجموعة من الصور الواضحة وعالية الجودة لنفس الشخص (مثل ألبوم مرجعي) لإعادة بناء الوجه. بدلاً من التخمين، تقوم باستخراج سمات الهوية الحقيقية بعناً—مثل شكل العين الدقيق وملمس الجلد—من الصور الجيدة وتدمجها مع الصورة الضبابية. والنتيجة هي صورة مرممة تبدو حادة وطبيعية للغاية، ولكن الأهم من ذلك أنها تظل "صادقة" تجاه الشخص الأصلي، حيث تحافظ على تجاعيده الفريدة، ولون عينيه، وحتى الشامات الصغيرة، بدلاً من تنعيمها لتصبح مظهراً بلاستيكياً مزيفاً.
المشكلة: عندما يعني "المثالي" أنه "مزيف"
ترميم الوجه يشبه محاولة حل لغز حيث نصف القطع مفقودة أو ذائبة. عندما تكون جودة الصورة منخفضة (LQ)—ربما تكون ضبابية، أو مليئة بالضجيج، أو مضغوطة—يفقد الكمبيوتر التفاصيل الدقيقة التي تجعل الوجه فريداً. تحاول الأدوات الموجودة ملء الفجوات باستخدام نماذج "توليدية"، وهي تشبه الفنانين الذين شاهدوا ملايين الوجوه ويحاولون رسم وجه جديد بناءً على ما يعرفونه.
المشكلة هي أن هؤلاء الفنانين غالباً ما يصبحون مبدعين أكثر من اللازم. قد ينعمون البشرة لدرجة تجعلها تبدو كدمية، أو قد يغيرون ملمس الشعر ليبدو متجانساً للغاية، مما يفقدنا خصلات الشعر الطبيعية غير المنتظمة. يسمى هذا "الإفراط في التنعيم" (over-smoothing). وفي أحيان أخرى، قد يغيرون الألوان، مما يجعل بشرة الشخص تبدو وردية جداً أو عيونهم بلون مختلف. وبينما تبدو هذه الصور "عالية الجودة" من حيث الحدة، إلا أنها تفشل في اختبار "الصدق": فهي لا تبدو كالشخص الحقيقي بعد الآن. إنها تبدو كنسخة عامة ومثالية من البشر، وهو أمر رائع لشخصية سينمائية ولكنه سيء لتحديد هوية صديقك في الزحام.
الحل: المحقق "الصادق"
يقترح المؤلفون HonestFace، وهو نظام مصمم لإصلاح هذه المشكلات من خلال كونها "صادقة" فيما تراه. وهي تعمل بناءً على فكرة بسيطة ولكنها قوية: إذا كنت تريد إصلاح صورة ضبابية لشخص معين، فلا ينبغي لك مجرد التخمين؛ بل يجب أن تنظر إلى صور أخرى واضحة لنفس الشخص لتوجيه عملية الإصلاح.
إليك كيف تعمل HonestFace، مقسمة إلى ثلاث "قوى خارقة" رئيسية:
1. محقق الهوية (Identity Embedder)
تخيل أنك تحاول وصف صديق لرسام، لكن لا يمكنك سوى إظهار صورة ضبابية له. ولديك أيضاً مجلد من الصور الواضحة لهذا الصديق. قد ينظر الذكاء الاصطناعي العادي إلى الصورة الضبابية فقط ويخمن. أما HonestFace، فتتصرف كمحقق. لديها أداتان خاصتان:
- الباحث عن السمات: تقوم بالتركيز على الأجزاء الأكثر اتساقاً في الوجه، مثل العينين، لالتقاط تفاصيل محددة مثل لون العين وشكل الجفون من الصور المرجعية الواضحة.
- حافظ الهوية: تنظر إلى الوجه بأكمده لفهم "الصورة الكبيرة" لمن هو الشخص.
من خلال الجمع بين هذين الأمرين، تنشئ "مطالبة" (مجموعة من التعليمات) تخبر الذكاء الاصطناعي بالضبط من الذي يرسمه، مما يضمن أن العينين والمظهر العام يتطابقان مع الشخص الحقيقي، وليس مجرد تخمين عشوائي.
2. دليل تسليط الضوء (Masked Face Alignment)
حتى مع الهوية الصحيحة، قد يخطئ الذكاء الاصطناعي في الملمس. قد يجعل البشرة تبدو ناعمة جداً أو الشعر مثالياً جداً. لإصلاح ذلك، تستخدم HonestFace تقنية "تسليط الضوء". فهي تنشئ خريطة (خريطة حرارية) تسلط الضوء على الأجزاء الأكثر أهمية في الوجه للإدراك البشري—مثل العينين، والفم، وملمس الجلد حول التجاعيد.
فكر في الأمر كمعلم يصحح اختباراً ويركز فقط على الأسئلة الأكثر أهمية. يركز الذكاء الاصطناعي طاقته على جعل هذه المناطق المحددة تبدو واقعية وذات ملمس، بدلاً من إضاعة الجهد في أجزاء أقل أهمية. هذا يضمن أن الوجه المرمم يحتوي على مسام طبيعية، وتجاعيد دقيقة، وشعر غير منتظم، بدلاً من مظهر بلاستيكي منمق.
3. سحر الخطوة الواحدة
عادةً، يستغرق إصلاح صورة باستخدام نماذج الذكاء الاصطناعي المتقدمة هذه خطوات عديدة، مثل تقشير البصلة طبقة تلو الأخرى، مما يستغرق وقتاً طويلاً. تستخدم HonestFace "نموذج انتشار من خطوة واحدة" (one-step diffusion model). هذا يشبه ساحراً يمكنه إخراج أرنب من القبعة بضربة واحدة بدلاً من القيام بخدعة طويلة ومعقدة. إنها تأخذ الصورة الضبابية والصور المرجعية وتنتج النتيجة النهائية عالية الجودة في خطوة واحدة. وهذا يجعلها سريعة للغاية، حيث تستغرق حوالي 0.13 ثانية فقط لمعالجة الصورة، وهو وقت سريع بما يكفي للاستخدام في التطبيقات التي تعمل بالوقت الفعلي.
الإثبات الجديد: اختبار من العالم الحقيقي
لإثبات أن طريقتهم تعمل بالفعل، لم يستخدم الباحثون مجرد صور سيئة تم إنشاؤها بواسطة الكمبيوتر. لقد أنشأوا مجموعة بيانات جديدة تسمى MultiRefCeleb-Test. وهي مجموعة تضم أكثر من 9,000 صورة حقيقية لأكثر من 400 شخصية مشهورة التُقطت في ظروف العالم الحقيقي (مثل الحفلات الموسيقية، كما هو موضح في الشكل 1 من الورقة البحثية). هذه الصور تعاني من مشاكل حقيقية: إضاءة سيئة، وضبابية الحركة، وعيوب الضغط.
أظهرت النتائج أن HonestFace تفوقت على جميع الطرق الرائدة الأخرى.
- الجودة البصرية: في المقارنات جنباً إلى جنب، أنتجت HonestFace وجوهاً تبدو أكثر طبيعية. بينما جعلت الطرق الأخرى الوجوه تبدو كبلاستيك ناعم أو غيرت ألوان العيون، حافظت HonestFace على ملمس الجلد الواقعي والألوان الدقيقة.
- الهوية: كانت أفضل بكثير في الحفاظ على هوية الشخص. إذا أخذت صورة ضبابية لشخصية مشهورة، فإن HonestFace ترمم وجهاً يبدو كأنّه تلك الشخصية المشهورة، بينما تبدو الوجوه في الطرق الأخرى غالباً كشخص آخر أو كعارض أزياء عام.
- السرعة: على الرغم من قيامها بمهمة أكثر تعقيداً، إلا أنها كانت بنفس سرعة أسرع الطرق الحالية ذات الخطوة الواحدة.
ما لا تفعله (وما تستبعده)
الورقة البحثية واضحة جداً بشأن ما لا تفعله. فهي تجادل ضد فكرة أن "الأكثر نعومة هو الأفضل". وهي ترفض صراحةً الأساليب التي تنتج وجوهاً مفرطة النعومة و"بلاستيكية"، حتى لو بدت تلك الوجوه حادة. كما تجادل ضد الأساليب التي تعتمد على صورة مرجعية واحدة أو تدمج عدة صور معاً، مشيرة إلى أن هذه النهج تفوت التفاصيل الغنية اللازمة لترميم "صادق" حقاً.
المؤلفون واثقون من نتائجهم بناءً على اختبارات مكثفة على مجموعات بيانات اصطناعية (مصنوعة بالحاسوب) وواقعية. وقد قاسوا نجاحهم باستخدام مقاييس قياسية مثل مدى قرب الصورة المرممة من الأصل (PSNR, SSIM) ومدى "واقعيتها" بالنسبة للمحكمين البشريين (LPIPS, MANIQA). وتظهر البيانات أن HonestFace تسجل باستمرار درجات أعلى في هذه المجالات مقارنة بالطرق السابقة، مما يشير إلى أنها خطوة مهمة للأمام في جعل ترميم الوجه عالي الجودة وصادقاً في آن واحد.
باختصار، HonestFace هي طريقة جديدة لإصلاح الصور تقول: "لنلنجعلها تبدو رائعة، ولكن دعونا نتأكد من أنها لا تزال تشبهك". إنها تجمع بين سرعة الذكاء الاصطناعي الحديث والنهج الدقيق المهتم بالتفاصيل الذي يرفض التضحية بالحقيقة من أجل صورة جميلة.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.