From Daily Song to Daily Self: Supporting Reflective Songwriting of Deaf and Hard-of-Hearing Individuals through Generative Music AI

Dit paper introduceert SoulNote, een door generatieve AI aangedreven systeem dat doven en slechthorenden ondersteunt bij iteratief liedjes schrijven als dagelijkse reflectiepraktijk, wat leidt tot verbeterde zelfinzicht, emotieregulatie en een positievere houding ten opzichte van zelfzorg.

Youjin Choi, Jinyoung Yoo, Jaeyoung Moon, Yoonjae Kim, Eun Young Lee, Jennifer G. Kim, Jin-Hyuk Hong

Gepubliceerd Tue, 10 Ma
📖 5 min leestijd🧠 Diepgaand

Each language version is independently generated for its own context, not a direct translation.

Van Dagelijkse Liedjes naar Dagelijkse Zelf: Hoe AI De Doven Helpt Om Hun Verhaal te Zingen

Stel je voor dat je een zee van emoties hebt, maar de brug naar de wereld is weggebroken. Voor mensen die doof of slechthorend zijn, is dit vaak de realiteit. In een wereld die draait om geluid en spraak, kunnen ze zich soms geïsoleerd voelen, alsof ze in een glazen kamer zitten die ze niet kunnen openen.

Dit onderzoek presenteert een nieuwe sleutel om die deur te openen: SoulNote. Het is een slimme computerassistent (een AI) die mensen helpt om hun gevoelens om te zetten in liedjes. Maar dit is geen gewone muziek-app; het is meer als een digitale dagboekschrijver die zingt.

Hier is hoe het werkt, vertaald in alledaags taal:

1. Het Probleem: De Muzikale Muur

Vroeger was muziek maken voor doven heel moeilijk. Het vereiste technische kennis en het horen van geluiden. Zelfs met moderne technologie voelden veel mensen zich vastgelopen: "Ik heb een verdrietig verhaal, maar hoe zet ik dat in een liedje zonder dat het klinkt als een robot?"

Oude methoden waren vaak éénmalig: "Maak nu een liedje, en klaar." Maar gevoelens veranderen niet in één dag. Ze hebben tijd nodig, net als een plant die moet groeien.

2. De Oplossing: SoulNote (De Digitale Vriend)

SoulNote is ontworpen als een veilige, digitale vriend die je door je dagboek leidt, maar dan in de vorm van een lied. Het werkt in drie simpele stappen, alsof je een huis bouwt:

  • Stap 1: De Conversatie (De Fundering):
    De AI begint niet met technische vragen over noten of ritmes. Nee, het vraagt: "Wat zag je vandaag?" of "Welk beeld komt in je hoofd?".

    • Analogie: Stel je voor dat je een schilder bent. De AI vraagt niet "Welke verfkleur is hex-code #FF5733?", maar "Wat voelde je toen je die regenbui zag?". Het helpt je om je herinneringen en gevoelens te benoemen, net zoals een therapeut dat zou doen, maar dan zonder oordeel.
  • Stap 2: De Tekst (De Muren):
    Op basis van jouw verhaal schrijft de AI een eerste versie van de tekst. Maar jij bent de baas. Je kunt de tekst direct aanpassen, net als in een tekstverwerker.

    • Het Magische Moment: Soms helpt het om je eigen verhaal te zien in de tekst van iemand anders (de AI). Het is alsof je naar een spiegel kijkt, maar dan een spiegel die je verhaal netjes in rijm zet. Dit maakt het makkelijker om naar je eigen problemen te kijken zonder je erdoor overweldigd te voelen. Het creëert een beetje afstand, zodat je kunt zeggen: "Ah, dat is wat er gebeurt, en dat is oké."
  • Stap 3: De Muziek (Het Dak en de Sfeer):
    Dit is waar de magie gebeurt. De AI zet je tekst om in muziek. Omdat de gebruiker misschien niet goed kan horen, ziet de muziek er ook uit!

    • Visuele Muziek: De ritmes worden getoond als blokken, de toonhoogte als bewegende stippen en de emotie als kleuren. Het is alsof je de muziek kunt zien.
    • De Sfeer: Als je verdrietig bent, suggereert de AI misschien een rustig piano-nummer. Maar soms helpt het om juist een energiek liedje te maken om je stemming te veranderen. De AI helpt je om te experimenteren: "Probeer eens een snellere beat, misschien voelt dat beter?"

3. Wat Gebeurde Er? (De Resultaten)

De onderzoekers gaven 12 doven of slechthorenden deze app voor drie weken. Ze mochten elke dag een liedje maken over hun leven. Wat deden ze?

  • Ze leerden zichzelf kennen: Door steeds weer over dezelfde moeilijke situaties te zingen, begonnen ze hun eigen gedrag en gevoelens beter te begrijpen. Het was alsof ze een oude kamer in hun hoofd schoonveegden en nieuwe meubels neerzetten.
  • Ze leerden omgaan met emoties: In plaats van boosheid of verdriet in zich op te slaan, zetten ze het in een liedje. Dat liedje werd een emotionele reddingsboei. Als ze zich later weer slecht voelden, konden ze terugluisteren naar hun eigen liedje om zich weer sterk te voelen.
  • Ze durfden meer te praten: Door te oefenen met het uiten van gevoelens in de app, durfden ze diezelfde gevoelens ook in het echte leven te delen met familie en collega's. De muur viel een stukje in.

4. Waarom is dit belangrijk?

Dit onderzoek laat zien dat AI niet alleen maar kan "rekenen" of "teksten schrijven". Het kan een brug zijn.

Voor mensen die zich vaak niet gehoord voelen, biedt SoulNote een manier om gehoord te worden door de muziek zelf. Het transformeert het schrijven van een liedje van een eenmalige hobby in een dagelijkse gewoonte van zelfzorg, net zoals tandenpoetsen of een wandeling maken.

Kortom: SoulNote is als een digitale gids die je helpt om je innerlijke stormen om te toveren in een prachtig landschap dat je kunt zien, horen (of voelen) en waar je weerstand kunt vinden. Het bewijst dat muziek, zelfs voor wie niet kan horen, een krachtige manier is om te helen en te groeien.