Investigating Activity-Linked Audio for Conveying Partner Activity Information in Collaborative VR

في المساحات المشتركة للواقع الافتراضي، حيث يلتقي الناس كأفاتار رقمي للبناء أو التصميم أو مجرد التواجد معاً، يظل هناك تحدٍ جوهري: كيف تعرف ما يفعله شريكك عندما لا تستطيع رؤيته؟ في العالم المادي، توفر حواسنا تدفقاً مستمراً من المعلومات منخفضة المستوى حول الأشخاص من حولنا. نحن نسمع وقع خطوة، أو صرير كرسي، أو حفيف ملابس، وهذه الأصوات تخبرنا أين يتواجد الشخص وماذا يفعل دون الحاجة إلى النظر إليه مباشرة. هذا الوعي الخلفي يسمح لنا بالعمل جنباً إلى جنب دون الحاجة إلى تواصل بصري مستمر. أما في البيئة الافتراضية، فغالباً ما تغيب هذه الأصوات الطبيعية؛ إذ يقتصر المستخدمون على مجال الرؤية الضيق الذي توفره سماعات الرأس، ولا تصدر الأفاتارات الرقمية التي يسكنونها أصوات الحركة العرضية بشكل طبيعي. وبدون هذه الإشارات، يضطر المتعاونون إلى تحريك رؤوسهم باستمرار للتحقق من بعضهم البعض، مما يقطع تركيزهم ويعطل تدفق العمل. وقد سعى الباحثون منذ فترة طويلة لإيجال طرق لسد هذه الفجوة الحسية، مستكشفين ما إذا كان إضافة أصوات اصطناعية إلى عالم افتراضي يمكن أن يعيد ذلك الشعور المفقود بالحضور المشترك.

قام فريق من الباحثين في جامعة تسوكوبا باختبار هذه الفكرة من خلال إدخال نوعين مختلفين من الصوت في مهمة تعاونية في الواقع الافتراضي. أرادوا معرفة ما إذا كان سماع نشاط الشريك من خلال الصوت سيغير كيفية عمل الناس معاً، وكيف يشعرون تجاه بعضهم البعض، وكيف يحركون أجسادهم. وللقيام بذلك، أحضروا أربعة وعشرين طالباً إلى غرفة افتراضية لأداء مهمة تجميع كتل. عمل المشاركون في أزواج، حيث تبادلوا الأدوار بين "المُوجِّه" و"المنفذ". كان بإمكان المُوجِّه رؤية مخطط لهيكل ما، وكان عليه تقديم تعليمات لفظية للمنفذ، الذي كان عليه البحث في أربع طاولات مختلفة حول الغرفة للعثور على الكتل الصحيحة وإحضارها إلى طاولة مركزية. أنشأ الباحثون ثلاث بيئات استماع مختلفة لهذه الأزواج. في أحد السيناريوهات، لم يكن هناك أي صوت إضافي بخلاف أصواتهم. وفي سيناريو ثانٍ، قام النظام بتشغيل صوت خطوات الأقدام كلما مشى شخص ما. وفي السيناريو الثالث، أنتج النظام صوتاً تجريدياً مستمراً يزداد علواً أو انخفاضاً بناءً على مقدار حركة الشخص بجسده بالكامل، وليس قدميه فقط. صُمم هذا الصوت الثالث ليعمل كـ "تجسيد صوتي" (sonification)، وهو وسيلة لتحويل مستويات النشاط العام إلى حجم من الضجيج يتبع الأفاتار في أرجاء الغرفة.

كشفت الدراسة أن إضافة هذه الأصوات لم تغير بشكل كبير الشعور العام بالتجربة أو سرعة إنجاز الأزواج لمهمتهم. وعندما سُئل المشاركون لاحقاً عن مدى شعورهم بالحضور مع شركائهم أو مدى إعجابهم بالطرف الآخر، كانت إجاباتهم هي نفسها بغض النظر عما إذا كانوا قد سمعوا خطوات الأقدام، أو ضجيجاً تجريدياً، أو صمتاً. لم يذكروا أن صوتاً واحداً جعل المهمة أسهل أو جعل الشريك أكثر ودية. علاوة على على ذلك، وجد الباحثون أن الأصوات لم تجعل الناس يلتفتون برؤوسهم أكثر للنظر إلى شركائهم. حتى عندما كان الشريك يعمل خلفهم، خارج نطاق الرؤية، لم يلتفت المستمعون باستمرار استجابةً للأصوات الجديدة. يشير هذا إلى أن الأصوات لم تعمل كأمر مباشر للنظر، ولم تغير جوهرياً المناخ الاجتماعي للتعاون بطريقة يمكن للمشاركين وصفها بسهولة.

ومع ذلك، كشفت نظرة فاحصة للبيانات عن تغيير أكثر دقة وتحديداً في السلوك. اكتشف الباحثون أن الأصوات أثرت على كيفية حركة "المنفذ"، ولكن في حالات محددة للغاية. فعندما كان المنفذ يبحث عن كتلة في طاولة تقع مباشرة خلف المُوجِّه، تغيرت أنماط حركته اعتماداً على الصوت الذي يعمل. في الحالة التي سُمع فيها صوت خطوات الأقدام، تحرك المنفذ مسافة أكبر وقضى وقتاً أطول في الحركة أثناء بحثه مقارنة بحالة الصمت. وفي حالة الضجيج التجريدي، قضى أيضاً وقتاً أطول في الحركة، رغم أنه لم يقطع مسافات كما في حالة خطوات الأقدام. يشير هذا إلى أنه عندما كان المنفذ يعمل في النقطة العمياء للمُوجِّه، بدا أن وجود الصوت يشجعهم على الحركة أكثر، ربما لإثبات حضورهم أو لتوليد الصوت بأنفسهم. لم يكن التأثير زيادة عامة في النشاط عبر المهمة بأكملها؛ بل ظهر فقط عندما جعلت العلاقة المكانية بين الشخصين التواصل البصري صعباً وتطلبت المهمة البحث.

استمع الباحثون أيضاً إلى أوصاف المشاركين لتجربتهم لفهم كيفية تفسيرهم لهذه الأصوات. وصف الكثيرون خطوات الأقدام بأنها إشارة واضحة على أن شخصاً ما يمشي أو يتوقف، وهي رابط مباشر بين الصوت وفعل محدد. في المقابل، غالً ما وُصف الضجيج التجريدي بأنه همهمة خلفية أو صوت بيئي، حيث لم يكن بعض المشاركين متأكدين تماماً مما يعنيه، بينما شعر آخرون أنه يخبرهم ببساطة أن الشريك نشط. يسلط هذا الاختلاف الضوء على مقايضة في التصميم: فالأصوات التي تحاكي أحداث العالم الحقيقي سهلة الفهم ولكنها تخبرك فقط عن ذلك الحدث المحدد، بينما يمكن للأصوات التجريدية أن تغطي نطاقاً أوسع من الأنشطة ولكنها أصعب في التفسير. تشير الدراسة إلى أن هذه الأصوات المرتبطة بالنشاط في الواقع الافتراضي التعاوني ليست بديلاً للمعلومات البصرية، ولا هي حل سحري يجعل الجميع يشعرون بقرب أكبر. بدلاً من ذلك، تعمل كإشارات طرفية، طبقة خفية من المعلومات تصبح مفيدة فقط عندما ينقطع الاتصال البصري وتصبح الحاجة لمعرفة مكان الشريك أمراً حاسماً. وتشير النتائج إلى أن قيمة مثل هذه الأصوات تعتمد بشدة على سياق العمل والعلاقة الفيزيائية بين المتعاونين، بدلاً من كونها فائدة ثابتة طوال التجربة بأكملها.