High-Quality Facial Geometry and Appearance Capture at Home
تقدم هذه الورقة طريقة جديدة وسهلة الاستخدام لالتقاط هندسة ومظهر ثلاثي الأبعاد عالي الجودة وكامل للوجه — بما في ذلك الجلد، والشعر، والعيون، وتجويف الفم — من خلال تسلسل وميض هاتف ذكي واحد في إضاءة خافتة، وذلك باستخدام تمثيل هجين ونماذج إضاءة متقدمة لتحقيق نتائج قابلة لإعادة الإضاءة مناسبة للاستخدام المنزلي اليومي.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أنك تريد إنشاء توأم رقمي لنفسك—شخصية ثلاثية الأبعاد تشبهك تماماً، وصولاً إلى مسام بشرتك واللمعة في عينيك. عادةً، للقيام بذلك، ستحتاج إلى زيارة استوديو تقني عالي المستوى يحتوي على غرفة مليئة بالكاميرات والأضواء الباهظة، مما يكلف آلاف الدولارات.
تقدم هذه الورقة البحثية طريقة جديدة تتيح لك القيام بذلك مباشرة من غرفة معيشتك، باستخدام هاتفك الذكي فقط وفي غرفة خافتة الإضاءة.
إليك تفصيل لكيفية قيامهم بذلك، باستخدام بعض التشبيهات البسيطة:
1. الإعداد: "المحقق والمصباح اليدوي"
بدلاً من الاستوديو الفاخر، تحتاج فقط إلى غرفة مظلمة (مثل الليل مع إغلاق الستائر) وهاتفك.
- الحيلة: تقوم بتشغيل كشاف هاتفك وتضعه بجانب عدسة الكاميرا مباشرة.
- الإجراء: تتحرك في دائرة حول الشخص (أو حول نفسك) لمدة 25 ثانية تقريباً أثناء تسجيل الفيديو.
- التشبيه: فكر في هذا الأمر كأن محققاً يسلط مصباحاً يدوياً واحداً ساطعاً على مشتبه به في غرفة مظلمة. من خلال التحرك حوله، يرى المحقق كيف ينعكس الضوء عن وجه المشتبه به من كل الزوايا. يستخدم الكمبيوتر هذه الظلال والإضاءات لتحديد الشكل ثلاثي الأبعاد وملمس الجلد.
2. المشكلة الكبرى: عيون "الكرات الزجاجية"
أصعب جزء في مسح الوجه هو العينان.
- المشكلة: الجلد يشبه الورقة غير اللامعة (المطفأة)؛ فهو يشتت الضوء بنعومة. لكن العينين تشبهان الكرات الزجاجية أو الكرات اللامعة؛ فهما تعكسان الضوء بشكل حاد وواضح. إذا حاولت مسح كرة لامعة باستخدام ماسح ضوئي ثلاثي الأبعاد قياسي، فغالباً ما تظهر ككتلة ضبابية أو دائرة مسطحة.
- الحل: أدرك المؤلفون أن محاولة "تخمين" شكل العين من فيديو هي مهمة صعبة للغاية. لذا، قاموا ببناء نظام هجين.
- بالنسبة للجلد، والشعر، والفم: يستخدمون "طينًا رقميًا" ذكيًا ومرنًا للغاية (يسمى "المجال العصبي" أو Neural Field) يمكنه تشكيل نفسه ليتناسب مع أي شكل بدقة.
- بالنسبة للعينين: هم لا يخمنون. بل يضعون كرتين رقميتين مثاليتين جاهزتين مسبقاً (مثل الكرات الزجاجية) حيث يجب أن تكون العينان. ويخبرون الكمبيوتر: "هاتان هما العينان؛ فقط حدد لون القزحية، ولكن حافظ على الشكل المستديم واللامع".
- النتيجة: هذا يمنع مشكلة "العيون الضبابية" ويمنحك عينين واقعيتين ولامعتين تعكسان الضوء بشكل صحيح.
3. لغز الإضاءة: فك تشابك "الحساء"
عندما تلتقط صورة في غرفة خافتة الإضاءة باستخدام مصباح يدوي، فإن الضوء الذي يسقط على وجهك هو مزيج من شيئين:
- المصباح اليدوي: شعاع ساطع وحاد (تردد عالٍ).
- توهج الغرفة: الضوء الخافت المنعكس عن الجدر walls (تردد منخفض).
الأمر يشبه محاولة تذوق الفرق بين الملح والسكر عندما يكون كلاهما مذاباً في وعاء من الحساء.
- الابتكار: ابتكر الباحثون "وصفة" رياضية خاصة (نموذج إضاءة مدمج) تعمل مثل المنخل. فهي تفصل "الملح" (انعكاس المصباح الحاد) عن "السكر" (توهج الغرفة الناعم). وهذا يسمح لهم بمعرفة كيفية انعكاس بشرتك للضوء بدقة، وهو أمر بالغ الأهمية لجعل النموذج ثلاثي الأبعاد يبدو واقعياً عند نقله إلى بيئة جديدة.
4. "الجواز الرقمي"
بمجرد أن ينتهي الكمبيوتر من عمله، فإنه لا يعطيك مجرد كتلة ثلاثية الأبعاد غريبة وغير متميزة. بل يقوم بتصدير النتيجة كـ ملف ثلاثي الأبعاد قياسي (مثل شبكة مع خرائط الأنسجة).
- لماذا هذا مهم: يمكنك أخذ هذا الملف ووضعه مباشرة في برامج شائعة مثل Blender (الذي يستخدمه المصورون ومطورو الألعاب).
- السحر: نظرًا لأنهم فصلوا بين الجزء "المطفي" (لون الجلد غير اللامع) والجزء "اللامع" (النقاط المضيئة)، يمكنك الآن أخذ توأمك الرقمي ووضعه في حديقة مشمسة، أو كهف مظلم، أو مدينة مليئة بأضواء النيون، وسوف يتفاعل مع الضوء الجديد بشكل واقعي. إنه يشبه منح نفسك الرقمية جواز سفر عالمي يعمل في أي ظروف إضاءة.
الملخص
باختة القول، تقول هذه الورقة البحثية: "لا تحتاج إلى استوديو بمليون دولار للحصول على مسح ثلاثي الأبعاد لوجهك بجودة هوليوودية."
من خلال الجمع بين فيديو بسيط من هاتف ذكي ومزيج ذكي من "أشكال العيون الجاهزة" و"الرياضيات الذكية لفصل الضوء"، يمكن لأي شخص إنشاء نسخة ثلاثية الأبعاد عالية الجودة وقابلة لإعادة الإضاءة من نفسه، تبدو رائعة في أي لعبة فيديو أو فيلم.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.