What Is Sonification? Toward a Philosophy of Sonification

Stellen Sie sich vor, Sie hätten eine Superkraft: die Fähigkeit, Daten zu hören. Nicht nur Zahlen in einer Tabellenkalkulation, sondern die verborgenen Geschichten in ihnen. Dies ist die Welt der Sonifikation, ein Feld, in dem Wissenschaftler, Künstler und Designer Informationen in Klang verwandeln. Stellen Sie es sich wie das Übersetzen einer Fremdsprache vor; anstatt einen französischen Roman in englischen Text zu verwandeln, verwandeln Sie eine Wetterkarte oder ein Börsenchart in eine Melodie oder einen Rhythmus. Aber hier liegt der knifflige Teil: Wenn Sie Daten in ein Lied verwandeln, ist das dann Wissenschaft? Ist es Kunst? Oder ist es etwas ganz anderes? Jahrelang haben Menschen darüber gestritten, ob Sonifikation nur „Wissenschaft mit einem Beat“ oder „Musik mit einem Zweck“ ist, und blieben dabei oft in einer Endlosschleife aus Definitionen stecken. Um dies zu lösen, müssen wir uns zwei große Ideen ansehen. Erstens: Stellen Sie sich ein Rezept vor: Das Rezept selbst (die Regeln für das Mischen der Zutaten) ist dasselbe, egal ob Sie einen Kuchen für einen Geburtstag oder für eine Wissenschaftsmesse backen. Zweitens: Stellen Sie sich einen Samen vor: Ein Samen hat einen festen genetischen Code, aber er wächst in unterschiedliche Formen, je nachdem, welchen Boden und welches Sonnenlicht er vorfindet. Dieses Papier nutzt diese Ideen, um einen konzeptionellen Rahmen zu bieten, um zu bestimmen, was Sonifikation wirklich ist, und schlägt vor, dass sie sowohl ein striktes technisches Werkzeug als auch eine flexible kreative Praxis sein kann, ohne ihre Kernidentität zu verlieren.

---

Der Klang der Daten: Was ist Sonifikation eigentlich?

Sie haben also einen Haufen Daten. Vielleicht ist es die Temperatur eines Sterns, die Bewegung eines Roboters oder der Herzschlag eines Patienten. Sie wollen ihn hören. Sie bauen ein System, das diese Zahlen in Klänge umwandelt. Doch dann taucht eine Frage auf: „Ist das Musik?“ Wenn der Klang schön ist, ist es dann Kunst? Wenn der Klang einem Wissenschaftler hilft, einen Fehler zu entdecken, ist es dann Wissenschaft?

Dieses Papier, das auf der 31. International Conference on Auditory Display präsentiert wurde, befasst sich mit genau dieser Verwirrung. Der Autor, Rubén García-Benito, argumentt, dass wir die falsche Frage gestellt haben. Wir haben versucht, die Sonifikation in eine Box namens „Musik“ oder eine Box namens „Wissenschaft“ zu pressen, aber sie passt in keine der beiden. Stattdessen schlägt er vor, dass Sonifikation eine transkategoriale Praxis ist. Das ist eine schicke Art zu sagen, dass es ein technisches Werkzeug ist, das überallhin reisen kann – in einen Konzertsaal, ein Labor oder ein Klassenzimmer –, ohne seine Kernidentität zu verändern.

Um dies zu erklären, nutzt das Papier zwei philosophische Werkzeuge, die wir als Blaupause und Wachstumschart betrachten können.

Die Blaupause: Die unveränderlichen Regeln

Schauen wir uns zuerst die „Blaupause“ an. Das Papier verwendet eine Philosophie namens materialistische Gnoseologie (denken Sie an die Lehre davon, wie wir Wissen durch physische Handlungen aufbauen). Der Autor unterteilt die Sonifikation in drei Ebenen:

1. Das Physische (M1): Die eigentlichen Drähte, Lautsprecher und Lichtsensoren.
2. Die menschliche Erfahrung (M2): Wie man sich fühlt, was man hört und ob der Klang schön oder nervig ist.
3. Die Regeln (M3): Die unsichtbare, mathematische Logik, die besagt: „Wenn die Daten steigen, steigt auch die Tonhöhe.“

Das Papier argumentt, dass die Identität der Sonifikation primär in den Regeln (M3) lebt. Es ist das Rezept. Ob Sie dieses Rezept nun verwenden, um einem blinden Menschen die Navigation im Raum zu erleichtern, um eine Galaxie zu analysieren oder um eine Symphonie zu schreiben – die Regel, die die Daten mit dem Klang verbindet, bleibt dieselbe.

Hier ist die große Erkenntnis: Sonifikation wird durch ihre Regeln definiert, nicht durch ihr Publikum.
Das Papier legt nahe, dass Sonifikation nicht einfach zur „Musik“ wird, nur weil sie gut klingt oder in einem Konzert gespielt wird, noch verliert sie ihre Identität, wenn sie in einem Labor verwendet wird. Der Autor schlägt vor, dass man Gefahr läuft, die technische Identität der Praxis zu verdrängen, wenn man die Regeln ändert, um den Klang „schöner“ zu machen, ohne Rücksicht auf die Daten zu nehmen. Mit anderen Worten: Wenn die musikalische Vorliebe die Logik von Daten zu Klang überschreibt, hört die Praxis möglicherweise auf, als Sonifikation zu fungieren, selbst wenn der Klang bestehen bleibt. Aber wenn man die strengen Daten-zu-Klang-Regeln beibehält, bleibt es Sonifikation, selbst wenn das Publikum es als ein schönes Kunstwerk bewertet.

Der Wachstumschart: Wie sie ihre Form verändert

Als nächstes nutzt das Papier ein zweites Werkzeug des Philosophen Gilbert Simondon, das wie ein Wachstumschart funktioniert. Dies hilft zu erklären, wie Sonifikation so unterschiedlich aussehen kann, ohne zu zerbrechen.

Stellen Sie sich einen Samen vor. Der Samen hat einen spezifischen genetischen Code (die M3-Regeln). Aber wenn man ihn in eine Wüste pflanzt, wächst er auf eine bestimmte Weise. Pflanzt man ihn in einen Regenwald, wächst er auf eine andere Weise. Der Samen ist immer noch derselbe Samen, aber seine Form ändert sich, um sich an die Umgebung anzupassen.

Das Papier schlägt vor, dass Sonifikation ein metastabiles System ist. Das bedeutet, es ist kein fertiges, starres Objekt. Es ist ein System voller Potenzial, das sich an seine Umgebung anpasst.

• In einem wissenschaftlichen Labor ist der „Boden“ strenge Prüfung und Genauigkeit. Die Sonifikation wächst, um präzise und klar zu sein.
• In einer Kunstgalerie ist der „Boden“ Emotion und Ausdruck. Die Sonifikation wächst, um fesselnd und evokativ zu sein.
• In einem Klassenzimmer ist der „Boden“ Lernen. Die Sonifikation wächst, um bildend zu wirken.

Das Papier argumentt, dass diese Anpassungsfähigkeit keine Schwäche ist. Sie ist eine Stärke. Der „Samen“ (die technische Regel) bleibt gleich, aber die „Pflanze“ (das endgültige Klangerlebnis) verändert sich, um zur Situation zu passen. Dies erklärt, warum dieselbe Sonifikationstechnik sowohl für eine ernsthafte medizinische Diagnose als auch für ein unterhaltsames Videospiel verwendet werden kann, ohne dass die Technik selbst ihre Identität verliert.

Warum das wichtig ist

Warum sollte sich ein neugieriger Teenager darum kümmern? Weil dies die Verwirrung klärt, die Menschen oft davon abhält, Sonifikation ernst zu nehmen.

• Für Wissenschaftler: Es bedeutet, dass Sie sich nicht entschuldigen müssen, wenn Ihre Daten-Klang-Verbindung musikalisch ist. Solange die Regeln streng sind, ist es valide Wissenschaft.
• Für Künstler: Es bedeutet, dass Sie nicht so tun müssen, als sei Ihre Kunst „nur Daten“, um ernst genommen zu werden. Sie können die Regeln der Sonifikation nutzen, um Kunst zu erschaffen, ohne die technische Integrität zu verlieren, vorausgesetzt, die Daten-zu-Klang-Logik bleibt der Treiber.
• Für alle: Es hilft uns zu verstehen, dass zwei Dinge nicht dasselbe sind, nur weil sie dasselbe Material (Klang) verwenden. Ein Hammer bleibt ein Hammer, egal ob man ihn benutzt, um ein Haus zu bauen oder um einen Rhythmus in einem Lied zu klopfen. Das Werkzeug ist dasselbe; der Gebrauch ist ein anderer.

Das Papier behauptet nicht, jedes Geheimnis von Klang und Daten gelöst zu haben. Es liefert keine neue Formel für bessere Sonifikationen. Stattdessen bietet es eine neue Art des Denkens über sie an. Es schlägt vor, dass wir aufhören sollten zu fragen: „Ist das Musik oder Wissenschaft?“ und statfangen zu fragen: „Was sind die Regeln und wie werden sie angewendet?“

Indem es die unveränderlichen Regeln (die technische Identität) von der sich ändernden Erfahrung (dem künstlerischen oder wissenschaftlichen Kontext) trennt, gibt uns das Papier eine Landkarte, um durch die chaotische, aufregende Welt der Umwandlung von Daten in Klang zu navigieren. Es legt nahe, dass Sonifikation eine einzigartige, kraftvolle Praxis ist, die die Brücke zwischen den kalten, harten Fakten der Wissenschaft und der warmen, emotionalen Welt der Kunst schlagen kann, während sie ihre eigene, unverwechselbare Identität bewahrt.