From Head Yaw to HMD Pose: A Reproducible Benchmark of Subjective VR Outcome Recoverability

Die große Idee: Kann ein Kopfnicken eine Geschichte erzählen?

Stellen Sie sich vor, Sie tragen ein Virtual-Reality-Headset (VR). Normalerweise fragen Forscher Sie nach dem Erlebnis mit einer Umfrage, um herauszufinden, wie Sie sich gefühlt haben. Sie fragen Dinge wie: „War Ihnen übel?“, „Hatten Sie das Gefühl, wirklich dort zu sein?“ oder „War die Aufgabe zu schwer?“

Das Problem mit diesen Umfragen ist, dass sie retrospektiv sind. Es ist, als würde man jemanden bitten, einen Film zu beschreiben, den er vor drei Stunden gesehen hat; er könnte sich vielleicht nicht an die spezifischen Momente der Angst oder Langeweile erinnern oder einfach nur eine allgemeine Antwort geben.

Diese Arbeit stellt eine neue Frage: Können wir herausfinden, wie Sie sich gefühlt haben, indem wir einfach nur beobachten, wie Sie Ihren Kopf bewegt haben, während Sie das Headset getragen haben?

Die Forscher betrachteten das Headset nicht nur als Bildschirm, sondern als einen verhaltensbasierten Detektiv. Sie wollten sehen, ob die Art und Weise, wie Sie Ihren Kopf drehen, den Nacken bewegen oder umherblicken, einen „Fingerabdruck“ hinterlässt, der zu Ihren Gefühlen passt.

Das Experiment: Der „LEGO“-Test

Um dies zu testen, verwendeten die Forscher einen öffentlichen Datensatz namens FAST. Stellen Sie sich eine Gruppe von 108 Personen vor, die in einer virtuellen Welt zwei verschiedene, komplexe LEGO-Strukturen zusammenbaut.

• Der Aufbau: Während sie bauten, zeichnete das Headset jede noch so kleine Bewegung ihrer Köpfe auf (wohin sie blickten, wie schnell sie sich drehten, wie ruhig sie waren).
• Die Umfrage: Unmittelbar danach füllten dieselben Personen Standard-Fragebögen über ihre Erfahrung aus (Benutzerfreundlichkeit, Arbeitsbelastung, Präsenz und Übelkeit).
• Das Ziel: Die Forscher versuchten, ein Computerprogramm zu erstellen, das nur anhand der Kopfbewegungsdaten erraten konnte, was die Person in der Umfrage angegeben hätte.

Die 46 Hinweise: Ein „Bewegungs-Toolkit“

Die Forscher schauten nicht nur auf „Links-Rechts“-Drehungen. Sie erstellten ein riesiges Toolkit aus 46 verschiedenen Hinweisen (Deskriptoren), die in sechs Kategorien unterteilt sind. Betrachten Sie dies als verschiedene Linsen, durch die man die Kopfbewegung betrachten kann:

1. Session-Metadaten: Wie lange dauerte die Aufgabe? (Wie das Überprüfen der Zeit auf einer Stoppuhr).
2. Translation (Verlagerung): Wie weit hat sich die Person physisch durch den Raum bewegt? (Wie das Messen der Strecke, die ein Wanderer zurückgelegt hat).
3. Rotation (Drehung): Wie sehr hat sie den Kopf gedreht? (Wie eine Tänzerin, die sich im Kreis dreht).
4. Exploration (Erkundung): Wie wild haben sie den Raum abgescannt? Haben sie überall hingeschaut oder starrten sie nur auf einen Punkt? (Wie ein Tourist, der Fotos macht, im Vergleich zu einem Touristen, der starr auf eine Karte blickt).
5. Glätte/Stabilität: War die Bewegung ruckartig und zittrig oder glatt und ruhig? (Wie der Vergleich zwischen einer holprigen Autofahrt und einer sanften Zugfahrt).
6. Haltung (Posture): Hat die Person den Kopf über längere Zeit gesenkt oder gehoben gehalten? (Wie eine Person, die die Haltung verändert – zusammengesunken oder aufrecht stehend).

Die Ergebnisse: Was funktionierte und was nicht

Die Forscher ließen ihre Computermodelle laufen, um zu sehen, ob diese Kopfbewegungen die Antworten in den Umfragen vorhersagen konnten. Die Ergebnisse waren eine Mischung aus „Ja, teilweise“ und „Nicht wirklich“.

1. Der Gewinner: „Gefühl der Präsenz“ (Räumliche Präsenz) 🏆

Die Analogie: Stellen Sie sich vor, Sie sind so in einen Film vertieft, dass Sie vergessen, dass Sie in einem Kino sitzen.
Das Ergebnis: Dies war das einfachste Merkmal, das vorhergesagt werden konnte. Wenn eine Person das Gefühl hatte, „wirklich dort zu sein“, zeigten ihre Kopfbewegungen ein deutliches Muster. Sie neigten dazu, mehr herumzublicken, die Umgebung abzutasten und sich mit einem bestimmten Rhythmus zu bewegen. Der Computer konnte dieses Gefühl mit mäßigem Erfolg erraten.

• Die Lehre: Wenn Sie das Gefühl haben, „in“ der virtuellen Welt zu sein, bewegen Sie Ihren Kopf auf eine Weise, die dies verrät.

2. Die Verlierer: „Benutzerfreundlichkeit“ und „Arbeitsbelastung“ 📉

Die Analogie: Stellen Sie sich vor, Sie versuchen zu erraten, ob ein Puzzle „zu schwer“ war, nur indem Sie jemandem beim Kopfbewegen zusehen.
Das Ergebnis: Der Computer war darin schlecht. Selbst mit allen 46 Hinweisen konnte er nicht zuverlässig sagen, ob eine Aufgabe frustrierend oder zu schwierig war.

• Warum? Benutzerfreundlichkeit und Arbeitsbelastung hängen von Dingen ab, die der Kopf nicht zeigt. Hat die Person den falschen Knopf gedrückt? Ist sie an einem Logikproblem hängengeblieben? Hatte sie einfach einen schlechten Tag? Die Kopfbewegung erfasste diese inneren Kämpfe nicht.

3. Der Mittelweg: „Cybersickness“ (Krankheitsgefühl) 🤢

Die Analogie: Zu versuchen, zu erraten, ob jemand kurz vor der Seekrankheit steht, indem man ihm einfach nur dabei zusieht, wie er auf einem Boot steht.
Das Ergebnis: Der Computer konnte einige Anzeichen von Übelkeit erkennen (wie ruckartige Bewegungen oder bestimmte Kopfwinkel), aber er war nicht besonders genau. Er verwechselte oft „leicht unangenehm“ mit „sehr krank“.

• Die Lehre: Übelkeit hinterlässt eine Spur, aber es ist eine schwache Spur, die im Rauschen der normalen Bewegung verloren geht.

Der „Kopfdrehung“ vs. die „Ganzkörperbewegung“

Ein wesentlicher Teil der Studie war der Vergleich verschiedener Detailstufen.

• Der „Nur-Yaw“-Ansatz: Frühere Studien betrachteten nur die Links-Rechts-Drehung des Kopfes (Yaw).
• Der „Full-Pose“-Ansatz: Diese Studie betrachtte alles (Auf/Ab, Seitwärts, Geschwindigkeit, Glätte).

Das Urteil: Der „Full-Pose“-Ansatz war immer besser. Es ist, als würde man versuchen, ein Lied zu verstehen, indem man nur den Schlagzeuger hört (Yaw), im Vergleich dazu, wenn man das gesamte Orchester hört (Full Pose). Die zusätzlichen Details halfen, aber sie konnten nicht das Problem lösen, dass manche Gefühle (wie die Arbeitsbelastung) schlichtweg keine starke „Kopfbewegungs-Signatur“ besitzen.

Das Fazit

Diese Arbeit ist ein Realitätscheck für VR-Forscher.

• Werfen Sie die Umfragen nicht weg: Sie können Fragebögen nicht durch Kopftracking-Daten ersetzen. Der Kopf weiß nicht alles, was Ihr Gehirn fühlt.
• Aber er ist ein nützlicher Begleiter: Kopftracking ist eine großartige Ergänzung. Wenn der Computer sieht, dass Sie Ihren Kopf auf eine Weise bewegen, die auf „Präsenz“ hindeutet, kann er Ihre Umfrageantwort bestätigen. Wenn er sieht, dass Sie sich so bewegen, dass es auf „Übelkeit“ hindeutet, kann er Sie warnen, dass Sie vielleicht eine Pause brauchen.

Kurz gesagt: Ihre Kopfbewegung erzählt eine Geschichte, aber es ist nur eine Teilgeschichte. Sie ist gut darin, uns zu sagen, ob Sie sich „präsent“ gefühlt haben, aber sie ist nicht gut darin, uns zu sagen, ob Sie „gestresst“ oder „krank“ waren. Der beste Ansatz besteht darin, die Kopfbewegungsdaten zusammen mit den Umfragen zu verwenden, nicht anstelle von ihnen.