Autonomous robotic photography as a creative urban service
تقدم الورقة البحثية نظام LEAP، وهو نظام تصوير روبوتي ذاتي التشغيل تحت إشراف، يدمج بنجاح القواعد الجمالية المتعلمة مع الملاحة الآمنة والتكيفية في البيئات الحضرية الديناميكية، متفوقاً على النماذج المرجعية الحالية في كل من التقييمات الحسابية والجمالية البشرية مع إظهار قدرة قوية على التعميم عبر إعدادات متنوعة.
في ظل الإيقاع الصاخب للمدن الحديثة، أصبحت الروبوتات مشاهد مألوفة، ومع ذلك، ظلت أدوارها محددة إلى حد كبير بالمنفعة الوظيفية؛ فهي توصل الطرود، وتفحص الجسور، وتجمع الهياكل، وتؤدي مهام تتسم بالدقة ولكنها تفتقر إلى الروح. هذه الآلات تبرع في الانتقال من النقطة (أ) إلى النقطة (ب)، والتنقل عبر الحشود لضمان وصول الطرد بأمان. بيد أن الحياة النابضة في المدينة لا تقتصر فقط على اللوجستيات، بل تتعلق أيضاً باللحظات التي نختار تذكرها. فالتصوير الفوتوغرافي، وهو فعل إنساني عميق يتمثل في التقاط مشهد ما، ظل تجربة سلبية حيث يتعين على الشخص الذي يحمل الكاميرا تقسيم انتباهه باستمرار بين العالم من حوله وبين الجهاز في يديه. والسؤال الذي بدأ الباحثون في طرحه هو: هل يمكن للروبوت أن يفعل أكثر من مجرد نقل الأشياء؟ هل يمكنه المشاركة في الفعل الإبداعي للرؤية وتأطير اللحظة، ليعمل ليس كأداة فحسب، بل كرفيق في توثيق حياة المدينة؟
وللإجابة على ذلك، طور فريق من الباحثين نظاماً يسمى "LEAP"، وهو اختصار لـ "تعلم الجماليات المتجسدة للتصوير الفوتوغرافي" (Learning Embodied Aesthetics for Photography). هذا ليس مجرد كاميرا تنتظر الضغط على الزناد، بل هو روبوت متنقل يسعى بنشاط لإيجادة أفضل زاوية لالتقاط صورة. إن التحدي في بناء مثل هذه الآلة جسيم؛ إذ يجب على الروبوت أن يتحرك بأمان عبر مساحة عامة، متجنباً الناس والعقبات، بينما يتخذ في الوقت ذاته قرارات فنية حول مكان الوقوف وكيفية تأطير الموضوع. وخلافاً لروبوت التوصيل الذي يتبع مساراً ثابتاً، يجب على روبوت التصوير الفوتوغرافي أن يعدل موقعه باستمرار بناءً على ما يراه، مستجيباً لشخص يغير وضعية وقوفه أو يغير من حركته. أراد الباحثون معرفة ما إذا كان بإمكان الآلة تعلم القواعد الدقيقة والبديهية للتصوير الجيد وتطبيقها في الوقت الفعلي، دون تدخل بشري، لإنتاج صور يرغب الناس حقاً في الاحتفاظ بها.
اختبر الفريق هذا النظام في ثلاث بيئات مختلفة تماماً في العالم الحقيقي: حديقة عامة في شنتشن، وفعالية ترفيهية لكبار السن في مركز رعاية مسنين، ويوم تعريفي للطلاب وأولياء أمورهم في حرم جامعي. وفي كل موقع، تم نشر الروبوت للتفاعل مع الأشخاص الذين رغبوا في التقاط صور لهم. بدأت العملية عندما يبدي الشخص موافقته ويتخذ وضعية معينة. ثم يبدأ الروبوت، الذي يقف على بعد حوالي مترين، دورة من المراقبة والحركة؛ حيث ينظر إلى الشخص، ويحسب زاوية أفضل، ويحرك عجلاته ويميل كاميرته، ثم ينظر مرة أخرى. تكررت هذه العملية، في حلقة مغلقة من الرؤية والتعديل، حتى شعر الروبوت أنه وجد التكوين المثالي. وبمجرد التقاط الصورة، يقوم أحد الموظفين بمساعدة المشارك في اختيار صورته المفضلة، والتي تُطبع فوراً في الموقع. وعلى مدار أربع عشرة ساعة عبر هذه المواقع الثلاثة، أكمل الروبوت بنجاح إحدى وسبعين جلسة مع خمسة وأربعين مشاركاً مختلفاً. ومن المثير للإعجاب أنه فعل ذلك دون وقوع حادث تصادم واحد أو فشل في تأطير الموضوع، مما أثبت أن الآلة يمكنها التنقل في بيئة بشرية مزدحمة مع التركيز على المهمة الفنية المنوطة بها.
ولفهم مدى جودة الصور التي التقطها الروبوت، قارن الباحثون عمله بطريقتين روبوتيتين أخريين وبمصور بشري محترف كان مقيداً بنفس حركات الروبوت. وأظهرت النتائج أن نظام "LEAP" أنتج صوراً أفضل بكثير من النهجين الروبوتيين الآخرين. وفي اختبارات عمياء حيث قام الناس بتقييم الصور دون معرفة من أو ما الذي التقطها، حصلت صور "LEAP" على درجات أعلى في الجمال العام والتكوين. لقد استطاع الروبوت التعلم من مجموعة بيانات لمصورين خبراء، مراقباً كيف يحركون كاميراتهم لتأطير الأشخاص الواقفين، أو الجالسين، أو حتى المنحنين. كما تعلم كيفية التعامل مع المواقف المعقدة، مثل تحرك الشخص بشكل غير متوقع أو تغير الخلفية، وذلك من خلال تعديل موقعه للحفاظ على مظهر الموضوع بشكل جيد. بل إنه نجح في إنتاج أنواع مختلفة من اللقطات من نفس نقطة البداية، مما أظهر مرونة افتقرت إليها الأنظمة الجامدة القائمة على القواعد.
يشير نجاح هذا المشروع إلى أن الروبوتات يمكنها تجاوز المنفعة البسيطة لتصبح شريكة في الأنشاء الثقافية والإبداعية. فمن خلال الجمع بين الملاحة الآمنة والتقدير الفني المتعلم، أثبت النظام أن الآلات يمكنها فهم الفروق الدقيقة في التفاعل البشري والسرد البصري. ووجد الباحثون أن قدرة الروبوت على التكيف مع البيئات الجديدة والوضعيات المتغيرة كانت مفتاح أدائه، مما سمح له بالعمل بفعالية في أماكن لم يسبق له رؤيتها من قبل. وبينما لا يزال النظام يعتمد على طاقم بشري للإشراف على السلامة والتسليم النهائي، فإن الفعل الجوهري المتمثل في إيجاد اللقطة والتقاط الصورة كان يتم بشكل مستقل. يفتح هذا العمل آفاقاً جديدة للخدمات الحضرية، حيث قد تساعد الروبوتات يوماً ما الناس على توثيق حياتهم، أو التقاط ذكريات سفرهم، أو ببساطة الاستمتاع بلحظة تواصل دون تشتت الانتباه بإدارة الكاميرا. وتشير النتائج إلى أن مستقبل الروبوتات الخدمية قد لا يقتصر فقط على نقل الأشياء، بل يتعلق بمساعدتنا على رؤية وتذكر العالم من حولنا.
ملخص تقني: التصوير الفوتوغرافي الروبوتي المستقل كخدمة حضرية إبداعية
بيان المشكلة بينما يتم نشر الروبوتات الخدمية ذاتية القيادة بشكل متزايد للمهام النفعية مثل اللوجستيات والتفتيش، لا يزال دورها في الأنشطة الثقافية والترفيهية غير مستكشف بشكل كافٍ. يمثل التصوير الفوتوغرافي الروبوتي المستقل تحديًا فريدًا: فهو يتطلب دمجًا متزامنًا بين التقدير الجمالي (عملية إبداعية ذاتية) والتشغيل الفيزيائي الآمن والمتكيف في المساحات العامة الديناميكية. تعتمد أنظمة التصوير الفوتوغرافي الروبوتية الحالية عادةً على فصل التقييم الجمالي عن التحكم الفيزيائي أو الاعتماد على مسارات هندسية محددة مسبقًا، مما يحد من قدرتها على التعامل مع الطبيعة "الاستشعارية النشطة" للتصوير الفوتوغرافي، حيث يجب على الروبوت التكيف باستمرار مع حركة المشاركين، وتغيرات الوضعيات، وديناميكيات الخلفية. علاوة على ذلك، تفتقر الأنظمة الحالية غالبًا إلى سير عمل كامل موجه للمشارك يعالج مسألة الموافقة، والسلامة، وتقديم خدمة ملموسة (مثل الطباعة في الموقع) في البيئات الحضرية غير المنظمة.
المنهجية: نظام LEAP يقدم المؤلفون نظام LEAP (تعلم الجماليات المتجسدة للتصوير الفوتوغرافي)، وهو نظام تصوير فوتوغرافي روبوتي خاضع للإشراف مصمم لسد الفجوة بين القواعد الجمالية المتعلمة والملاحة الفيزيائية الآمنة. يستخدم النظام بنية هرمية مغلقة الحلقة:
جمع البيانات والتمثيل:
قام المؤلفون بتنسيق مجموعة بيانات جديدة لمسارات العالم الحقيقي تضم 864 تسلسلًا فيديو-حركيًا عالي الدقة عبر 50 وضعية مختلفة للموضوع، تم جمعها عبر إعداد التقاط الحركة مع مصور فوتوغرافي خبير.
التمثيل البصري: بدلاً من الاعتماد فقط على صور RGB الخام، يستخرج نظام LEAP تمثيلاً مركبًا يتكون من النقاط المفتاحية للهيكل العظمي (لتكوين الجسم)، وقناع تقسيم المقدمة (لحدود الموضوع)، وخريطة عمق نسبية مُطبعة غير خطيًا. هذا التجريد يقلل من الحساسية تجاه الإضاءة، والملابس، واختلافات الملمس، مما يسهل الانتقال إلى بيئات غير مدربة.
إطار التعلم (مطابقة التدفق الشرطي - Conditional Flow Matching):
للتعامل مع الطبيعة متعددة الأنماط للتصوير الفوتوغرافي (حيث يمكن لعدة حركات كاميرا أن تنتج تكوينات صحيحة بالتساوي)، يستخدم LEAP تقنية مطابقة التدفق الشرطي (CFM).
يتعلم النموذج حقل متجه يربط عينة ضوضاء غاوسية أولية بنماذج المسارات الخبيرة، مشروطة بالملاحظة البصرية. يسمح هذا للنظام بتوليد مسارات كاميرا متنوعة ومعقولة بدلاً من متوسطها في حركة واحدة حتمية.
يتنبأ السياسة بتسلسل من H-خطوة من نقاط الطريق (waypoints) ذات 4 درجات حرية (إزاحة مستوية x,y، وانحراف yaw، وميل pitch) بالنسبة للإطار الحالي.
التنفيذ الهرمي:
المستوى العالي (الجماليات): يتنبأ نموذج CFM بمسار لنقاط الطريق المستقبلية.
المستوى المنخفض (الملاحة): يقوم مخطط هندسي سريع (باستخدام FAST-LIO2 لتقدير المسافة و Dynamic Window Approach للتخطيط المحلي للمسار) بتنفيذ نقطة الطريق التالية مع ضمان تجنب الاصطدام بالعقبات الديناميكية.
التحكم مغلق الحلقة: يعمل النظام في دورة "الإدراك–التخطيط–التنفيذ". بعد تنفيذ مسار جزئي، يعيد الروبوت رصد المشهد. إذا تحرك المشارك أو تغير المسار بسبب تجنب العقبات، يقوم النموذج بمراجعة الهدف من موقع الروبوت الفعلي الجديد. تنتهي الحلقة عندما تتقارب الحركة المتوقعة بالقرب من الصفر، مما يؤدي إلى تفعيل الغالق (shutter).
سير العمل الخدمي:
تم دمج النظام في سير عمل خدمي كامل يشمل بدء الجلسة، والموافقة، وتعديل وجهة النظر المستقل، والتقاط الصورة، والطباعة في الموقع (عبر طابعة Canon محمولة)، والتسليم. يقوم موظفون بشريون بالإشراف على السلامة والتعامل مع التفاعلات، لكن التحكم في الكاميرا والملاحة يتم بشكل مستقل.
المساهمات الرئيسية
أول مجموعة بيانات للتصوير الفوتوغرافي في العالم الحقيقي: تقديم مجموعة بيانات (رؤية-حركة) مقترنة مخصصة للتصوير الفوتوغرافي الموجه للمشاركين، تلتقط الحركات التصحيحية للخبير والمسارات البديلة.
التحكم الجمالي مغلق الحلقة: نظام يوحد السياسات الجمالية المتعلمة مع تجنب الاصطدام في الوقت الفعلي، مما يسمح بإعادة تكوين مستمرة استجابةً لحركة المشارك وتغيرات البيئة.
التمثيل البصري القوي: إثبات أن الجمع بين النقاط المفتاحية للهيكل العظمي، والعمق النسبي، وأقنعة المقدمة يتفوق بشكل كبير على صور RGB الخام أو الميزات الجزئية في البيئات الداخلية والخارجية غير المدربة.
خدمة حضرية متكاملة من البداية للنهاية: أول عرض لنظام تصوير فوتوغرافي روبوتي خدمي مستقل بالكامل تم نشره عبر ثلاثة سياقات حضرية متميزة (منتزه، مركز لكبار السن، وحرم جامعي)، يغطي سير العمل بأكمله من البدء وحتى تسليم المطبوعات.
النتائج تم تقييم النظام من خلال ثلاث عمليات نشر حضرية خاضعة للإشراف و30 مهمة تصوير محكومة:
الجدوى التشغيلية: في ثلاثة عمليات نشر حضرية (منتزه موهبة شنتشن، فعالية في مركز لكبار السن، وتوجيه في حرم جامعي)، أكمل LEAP 100% من 71 جلسة (إجمالي 14 ساعة) دون اصطدامات أو فشل في اكتمال التأطير. وقد خدم 45 مشاركًا فريدًا.
الجودة الفوتوغرافية: في مقارنات محكومة مع اثنين من النماذج المرجعية—BTS (Bipedal Toric Space، هندسي شبه مستقل) و VS-RoT (Visual Servoing with Rule of Thirds، قائم على القواعد)—حقق LEAP:
درجات جمالية حسابية أعلى بنسبة 9.7–19.8% (مقاييس VEN و CLIP).
تقييمات جمالية بشرية (مجهولة المصدر) أعلى بنسبة 8.1–24.5% مقارنة بالنماذج المرجعية.
بينما حقق VS-RoT أعلى نسبة امتثال لقاعدة الأثلاث (RoT) (كما هو متوقع من تحسينه الصريح)، أنتج LEAP تكوينات أقرب إلى مرجع مصور محترف مقيد، بما في ذلك أنماط دقيقة مثل "مساحة التحديق" (gaze room).
النقل والتكيف: نجح LEAP في التعميم على مواقع داخلية وخارجية غير مدربة وتكيف مع وضعيات المشاركين المختلفة (الوقوف، الجلوس، القرفصاء، الاستلقاء). كما أظهر القدرة على التعافي من زوايا الرؤية المتدهورة وإنتاج أنواع متنوعة من التأطير من نفس الحالة الأولية، متجنبًا قيد "التأطير الثابت الواحد" الذي تعاني منه الطرق السابقة.
الأهمية والادعاءات يدعي المؤلفون أن LEAP يثبت جدوى التصوير الفوتوغرافي الروبوتي المستقل كخدمة حضرية سهلة الوصول، وتفاعلية، وذات مغزى ثقافي.
ما وراء النفعية: يجادل العمل بأن الروبوتات يمكن أن تتجاوز النقل والتفتيش لتدعم الخدمات الإبداعية والتجريبية، مما يساعد الناس على تسجيل ومشاركة الحياة الحضرية دون تشتت ناتج عن تشغيل الكاميرا.
التكامل على مستوى الخدمة: يؤكد البحث أن الأداء التقني (الدرجات الجمالية) غير كافٍ بدون سير عمل خدمي قوي يعالج دخول المشارك، والسلامة، والموافقة، والمخرجات الملموسة (الطباعة).
ضرورة الحلقة المغلقة: تدعم النتائج الادعاء بأن فصل التقدير الجمالي عن التحكم الفيزيست هو ما يحد من الأداء في البيئات الديناميكية؛ حيث إن النظام مغلق الحلقة الذي يراقب ويعيد مراجعة التكوين بشكل متكرر ضروري للتشغيل القوي.
النطاق المحدود: يقر المؤلفون بالقيود، مشيرين إلى أن النظام يعتمد حاليًا على الإشراف البشري للسلامة والبدء، ولا يحلل صراحةً الإضاءة أو تعبيرات الوجه، وقد تم اختباره في عدد محدود من المواقع. ويصيغون هذا العمل كإثبات مفهوم لنمط جديد من الخدمة الحضرية الإبداعية وليس كمنتج تجاري ناضج تمامًا.