An Embodied Companion for Visual Storytelling
تقدم هذه الورقة البحثية "Companion"، وهو نظام ذكاء اصطناعي متجسد يدمج روبوت رسم مع نماذج لغوية كبيرة لتسهيل عملية الإنشاء المشترك ثنائية الاتجاه القائمة على الكلام والرسم، مما يحول الروبوت من مجرد أداة سلبية إلى شريك فني مرح قادر على توليد قصص بصرية معترف بها مهنياً.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أنك تجلس إلى طاولة مع صديق، وفي يدك قلم، وبينكما ورقة بيضاء. تبدأ برسم دائرة بسيطة. ينظر إليها صديقك، يبتسم، ثم يضيف بعض الخطوط لتحويلها إلى شمس. بعد ذلك، تضيف أنت سحابة، ويضيف هو طائراً. أنتما لا تتبادلان الأدوار فحسب؛ بل تبنيان قصة معاً، وتتفاعلان مع تحركات بعضكما البعض في الوقت الفعلي.
الآن، تخيل أن صديقك هذا هو روبوت. لكنه ليس روبوتاً يتبع مجرد قائمة صارمة من التعليمات مثل آلة المصنع. هذا الروبوت هو شريك مرح ومثرثر يمكنه الاستماع إلى صوتك، والنظر إلى رسمك، واتخاذ قراره بإضافة لمسته الخاصة على القصة.
هذه هي الفكرة الجوهرية وراء "Companion" (الرفيق)، وهو مشروع جديد للفنان باتريك تريست وشركة Google DeepMind.
المشكلة: "الروح" في الآلة
لسنوات طويلة، استخدم الفنانون الروبوتات للرسم. عادة ما تسير العملية كالتالي: يقوم الفنان ببرمجة الروبوت بمجموعة من القواعد، ثم يتراجع خطوة إلى الوراء، ويترك الآلة تقوم بالعمل. يرسم الروبوت بدقة، لكن "يد" الفنان (حضوره المباشر وقراراته العفوية) تكون غائبة عن عملية الرسم الفعلية. الأمر يشبه كتابة رسالة، ثم ختمها وإرسالها إلى شخص غريب ليقوم هو بكتابة الرد؛ فأنت لا تتحدث إليه فعلياً أبداً.
شعر مبتكرو Companion أن هناك شيئاً مفقوداً. أرادوا أن يكون الروبوت مساعد طيار، وليس مجرد طيار آلي. أرادوا أن يكون الفنان والآلة في نفس الغرفة، يتخذان القرارات معاً، في تلك اللحظة ذاتها.
الحل: روبوت بـ "عقل" و"صوت"
لبناء هذا، قاموا بدمج ثلاثة أشياء:
- ذراع روبوتية مادية: ذراع روبوت منخفضة التكلفة، بها بعض التمايل، تمسك قلماً وترسم فعلياً على الورق. عيوبها الطفيفة (مثل اليد المرتعشة) تمنح الفن شعوراً فريداً يشبه البشر.
- "عقل" (نموذج لغوي كبير): ربطوا الروبوت بذكاء اصطناعي قوي (مثل تلك التي تقف وراء Gemini من Google). هذا الذكاء الاصطعي يفهم اللغة، والقصص، وتاريخ الفن.
- "مفردات" للرسم: علموا الذكاء الاصطناعي كيفية الرسم من خلال إطلاعه على أمثلة لكيفية صنع أشكال محددة (مثل شجرة أو وجه) باستخدام أدوات الروبوت الخاصة. يُسمى هذا "التعلم في السياق" (In-Context Learning). فكر في الأمر كأنك تري الروبوت كتاب صور لـ "كيفية الرسم" قبل بدء اللعبة.
كيف يعمل: رقصة الإبداع
التفاعل يشبه رقصة حيوية:
- أنت تتحدث: تقول للروبوت: "لنرس رسم قصة عن طائر يفقد ريشة".
- أنت ترسم: قد ترسم دائرة سريعة على الورقة.
- الروبوت يستجيب: ينظر الروبوت إلى دائرتك، ويستمع إلى قصتك، ويقرر: "أوه، هذه الدائرة هي طائر! سأضيف جناحاً". قد يقول أيضاً بصوت عالٍ: "أعتقد أن هذا الطائر خائف!" (إنه يتحدث بلكنة مضحكة وغير أصلية ليبدو كشخصية فريدة، وليس ككمبيوتر ممل).
- الروبوت يرسم: يحرك ذراعه لإضافة الجناح.
- أنت تتفاعل مجدداً: ترى الجناح وتقرر إضافة سحابة.
أحياناً، يفاجئك الروبوت. في إحدى التجارب، رسم أحد الفنانين سيارة في مكان مرتفع من الصفحة. وبدلاً من رسم طريق، فسر الروبوت السيارة على أنها تطفو وأضاف شخصية تطفو فوق سحابة بجانبها. لقد أخذ الفكرة ومضى بها في اتجاه لم يتوقعه الإنسان.
"سحر" النتيجة
اختبر الباحثون هذا النظام مع خبراء الفن. أرادوا معرفوا: هل هذه مجرد آلة غريبة، أم أنه فن حقيقي؟
قال الخبراء نعم، إنه فن.
- لديه أسلوب: تبدو الرسومات كمزيج من رسومات الكهوف القديمة، والرسومات الطفولية، والفن الحديث. إنها ليست مثالية، ولكن هذا هو الهدف. فالخطوط "المتذبذبة" تحكي قصة حركة الروبوت الفيزيائية.
- يروي قصصاً: استطاع الروبوت توضٍح الحكايات (مثل "السلحفاة والأرنب") أو كلمات الأغاني، مظهراً مرور الوقت عبر رسم نفس الشخصية في أماكن مختلفة على الصفحة.
- يبدو كشراكة: شعر الخبراء أن الروبوت لم يكن مجرد أداة يتم استخدامها، بل كان شريكاً له "شخصيته" الخاصة. لاحظ أحد الخبراء أن خطوط الروبوت المترددة جعلته يبدو وكأنه "يتعلم الرؤية" تماماً مثل البشر.
لماذا هذا مهم؟
يغير هذا المشروع طريقة تفكيرنا في الذكاء الاصطناعي في الفن. فبدلاً من أن يكون الذكاء الاصطناعي صندوقاً سحرياً يخرج صورة نهائية (مثل مولدات الصور من النص)، فإن Companion يدور حول الرحلة.
إنه الفرق بين طلب بيتزا (تحصل على نتيجة) وبين طهي وجبة مع صديق (تتشاركان التجربة). الروبوت لا يحل محل الفنان؛ بل يدعو الفنان إلى مغامرة جديدة وغير متوقعة حيث تكون الصورة النهائية مفاجأة لكليهما.
باختصار: Companion هو روبوت لا يرسم لك فحسب؛ بل يرسم معك، محولاً غرفة هادئة إلى ساحة لعب مشتركة من القصص والرسومات.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.