Humanoid Musical Robots as Experimental Interfaces for Music-Evoked Emotion

Musik wird seit langem als eine Sprache der Gefühle verstanden, eine Art und Weise für Menschen, sich miteinander zu verbinden und ihre eigenen Emotionen zu bewegen. Jahrzehntelang haben sich Wissenschaftler, die untersuchen, wie wir Musik empfinden, auf eine einfache, kontrollierte Methode verlassen: das Abspielen einer Aufnahme über Lautsprecher oder Kopfhörer und die Frage an die Menschen, wie sie sich dabei fühlen. Dieser Ansatz hat uns viel darüber gelehrt, wie unser Gehirn Klänge verarbeitet. Er beruht jedoch auf einer stillen Annahme, dass der Klang selbst die ganze Geschichte ist. In der realen Welt ist Musik selten nur ein Klang. Sie ist eine ganzheitliche körperliche Erfahrung, die das Sehen eines Darstellers, den Rhythmus seines Atems, die Bewegung seiner Hände und die geteilte Energie eines Raumes umfasst. Wenn wir eine Live-Darbietung hören, hören wir nicht nur Noten; wir beobachten einen Menschen dabei, wie er etwas ausdrückt, und dieser visuelle und soziale Kontext verändert, wie wir die Musik fühlen.

Diese Lücke zwischen dem Labor und der realen Welt ist der Fokus einer neuen Perspektive, die von Forschern der Sony Computer Science Laboratories und der Waseda University vorgeschlagen wurde. Sie schlagen vor, dass wir, um wirklich zu verstehen, wie Musik uns bewegt, einen Weg finden müssen, die gesamte Darbietung zu untersuchen, nicht nur das Audio. Die Herausforderung besteht darin, dass menschliche Darsteller unvorhersehbar sind; keine zwei Konzerte sind exakt gleich, was es schwierig macht, zu isolieren, welche spezifische Bewegung oder Geste eine spezifische emotionale Reaktion hervorruft. Um dies zu lösen, schlagen die Forscher vor, humanoide Musikroboter nicht nur als Unterhaltungseinheiten, sondern als präzise experimentelle Werkzeuge einzusetzen. Diese Maschinen können Musik mit exakt demselben Klang und exakt denselben Bewegungen jedes Mal aufs Neue spielen, was es Wissenschaftlern ermöglicht, ein kleines Detail zu verändern – wie etwa die Geschwindigkeit einer Kopfbewegung oder die Intensität eines Atemzugs – und genau zu sehen, wie diese Änderung die emotionale Reaktion des Zuhörers beeinflusst.

Der Kern dieses Vorschlags ist ein Wechsel in der Art und Weise, wie wir diese Roboter betrachten. Anstatt sie lediglich als Performer zu sehen, argumentieren die Autoren, dass sie als „experimentelle Schnittstellen“ genutzt werden sollten. Stellen Sie sich einen Roboter als eine Maschine vor, die abstrakte musikalische Ideen in physische Handlungen umwandeln kann, die messbar und wiederholbar sind. Während menschliche Musiker essenziell sind, um den Reichtum lebendiger Kunst zu verstehen, können sie nicht ohne Weiteres für spezifische wissenschaftliche Fragen herangezogen werden, da ihre Darbietungen zu stark variieren. Ein Roboter hingegen kann so programmiert werden, dass er eine Note mit einem spezifischen Volumen, einem spezifischen Timing und einer damit einhergehenden Körperbewegung spielt und dies dann exakt so wiederholt. Dies ermöglicht es Forschern, den Klang von der Sicht oder die Bewegung von der sozialen Verbindung zu trennen, was mit einer menschlichen Band unmöglich ist.

Um zu beweisen, dass diese Idee technisch machbar ist, präsentiert die Arbeit eine Fallstudie eines spezifischen Roboters namens Waseda Saxophonist, bekannt als WAS-5. Dies ist ein humanoider Roboter, der darauf ausgelegt ist, ein Standard-Altsaxophon zu spielen. Er ist keine einfache Maschine, die bloß Knöpfe drückt; er ahmt die komplexe Biologie eines menschlichen Spielers nach. Er verwendet eine Luftpumpe und Ventile, um den Luftstrom zu steuern, und besitzt einen speziellen Mundmechanismus aus flexiblem Kunststoff, der sich in acht verschiedene Richtungen bewegen kann, um den Klang zu formen, ähnlich wie ein menschlicher Spieler seine Lippen und seine Zunge einsetzt. Die Forscher zeigten, dass dieser Roboter das Volumen und den Ton der Musik mit extremer Präzision kontrollieren kann. In Tests konnte er eine breite Palette von Lautstärken erzeugen, von sehr leise bis sehr laut, mit einem Dynamikumfang von über 24 Dezibel für bestimmte Noten. Diese Form der Kontrolle ist entscheidend, da sie bedeutet, dass der Roboter die subtilen Veränderungen im Klang erzeugen kann, die Menschen nutzen, um Trauer, Freude oder Spannung auszudrücken, und dies wiederholt ohne Variation tun kann.

Über das bloße Spielen der Noten hinaus wurde der WAS-5-Roboter auch auf seine Fähigkeit getestet, mit einem menschlichen Zuhörer zu interagieren. In einem Experiment wurden Teilnehmer gebeten, im Rhythmus der vom Roboter gespielten Musik mit den Füßen zu klatschen bzw. zu wippen. Der Roboter wurde so programmiert, dass er auf zwei verschiedene Arten agierte: Manchmal hörte er auf die Person und passte sich deren Geschwindigkeit an, und ein anderes Mal übernahm er die Führung und leitete die Person sanft dazu an, schneller oder langsamer zu wippen. Die Ergebnisse zeigten, dass der Roboter erfolgreich in der Lage war, seine Musik an die Bewegungen der Person anzupassen und auch die Bewegungen der Person zu beeinflussen, damit diese dem Rhythmus des Roboters entsprachen. Dies demonstrierte, dass der Roboter eine „Closed-Loop“-Interaktion (einen geschlossenen Regelkreis) eingehen kann, bei der die Maschine und der Mensch ständig in Echtzeit aufeinander reagieren. Dies ist ein entscheidender Schritt, da es zeigt, dass der Roboter dazu verwendet werden kann, zu untersuchen, wie soziale Verbindung und Synchronisation unsere Gefühle beeinflussen, und nicht nur, wie wir auf eine Aufnahme reagieren.

Aufbauend auf diesen technischen Errungenschaften skizzieren die Autoren mehrere neue Wege, um Musik und Emotionen zu untersuchen, die zuvor unmöglich waren. Ein vorgeschlagenes Experiment würde Menschen bitten, den Roboter spielen zu hören, während sie hinter einem Vorhang verborgen sind, und anschließend, während sie ihn spielen sehen, um zu sehen, wie sehr die visuelle Präsenz des Roboters das emotionale Erlebnis verändert. Eine weitere Idee besteht darin, die Körperbewegungen des Roboters zu verändern – etwa wie stark er schwankt oder wie sich seine Augen bewegen –, während die Musik exakt gleich bleibt, um herauszufinden, welche spezifischen Gesten die Musik emotionaler wirken lassen. Ein dritter Weg besteht darin, einen Zuhörer zwischen zwei anderen Robotern in einer Publikumssituation zu platzieren, um zu sehen, wie die synchronisierte Bewegung der Gruppe das Gefühl von Vertrauen und Engagement des Zuhörers beeinflusst. Diese Experimente zielen darauf ab, die komplexe Erfahrung der Musik in ihre Einzelteile zu zerlegen: den Klang, das Sehen, die Bewegung und die soziale Verbindung, um zu sehen, wie jeder einzelne Teil zum Gefühl der Emotion beiträgt.

Die Forscher merken vorsichtshalber an, dass dieser Ansatz Grenzen hat. Sie räumen ein, dass Roboter kein perfekter Ersatz für Menschen sind; sie sind durch ihre Materialien und Sensoren begrenzt und erfassen möglicherweise nicht jede Nuance einer menschlichen Darbietung. Es besteht auch das Risiko, dass ein Roboter, der einem Menschen zu ähnlich sieht, sich aber etwas anders bewegt, bei manchen Menschen ein beunruhigendes Gefühl auslösen könnte. Darüber hinaus behauptet die Arbeit nicht, dass diese Roboter bereits bewiesen haben, wie Musik Emotionen hervorruft; vielmehr argumentiert sie, dass sie die notwendigen Werkzeuge bereitstellen, um diese Experimente ordnungsgemäß durchzuführen. Die vorgestellte Arbeit ist ein Vorschlag und eine Demonstration der Machbarkeit, die zeigt, dass die Technologie existiert, um diese schwierigen Fragen zu stellen. Durch den Einsatz dieser Maschinen als präzise, wiederholbare Werkzeuge hoffen Wissenschaftler, über die Grenzen der aufgenommenen Audioaufnahme hinauszugehen und schließlich die ganzheitliche, verkörperte Natur dessen zu verstehen, wie Musik das menschliche Herz berührt.