From Daily Song to Daily Self: Supporting Reflective Songwriting of Deaf and Hard-of-Hearing Individuals through Generative Music AI

この論文は、生成 AI を活用して聴覚障がい者が継続的な楽曲作成を通じて自己洞察や感情の調整を促す「SoulNote」というシステムを提案し、それが日常的な自己発見と振り返りの実践として機能することを示しています。

Youjin Choi, Jinyoung Yoo, Jaeyoung Moon, Yoonjae Kim, Eun Young Lee, Jennifer G. Kim, Jin-Hyuk Hong

公開日 Tue, 10 Ma
📖 1 分で読めます☕ さくっと読める

Each language version is independently generated for its own context, not a direct translation.

この論文は、**「聴覚に障がいがある方(ろう者や難聴者)が、AI を使って『歌』を作ることで、心の健康を保ち、自分自身を深く理解できるようになる」**という画期的な研究を紹介しています。

タイトルを日本語に訳すと**「日常の歌から、日常の自分へ:生成 AI によるろう者の反射的な歌作りの支援」**といった感じです。

この難しい研究を、誰でもわかるような「日常の言葉」と「面白い比喩」を使って説明しますね。


🎵 1. 問題:「言葉にできない」もどかしさ

聴覚に障がいがある方にとって、聞こえない社会で生きていくのは大変です。言葉で気持ちを伝えにくいと、孤独を感じたり、自分の感情がうまく整理できなくなったりすることがあります。
音楽や歌は、言葉以外の「表現の手段」として素晴らしいですが、音楽の知識がないと「自分の気持ちを歌にしたい!」と思っても、どうやって作ればいいか分からず、ハードルが高いのが現実でした。

🤖 2. 解決策:「ソウルノート(SoulNote)」という魔法の相棒

研究者たちは、**「ソウルノート」という新しいシステムを開発しました。これは、「あなたの気持ちを歌に変えてくれる AI のお友達」**です。

  • 会話で始める: まず、AI とチャットで「今日の出来事」や「悲しいこと」について話します。
  • 歌詞に変える: AI があなたの話を聞いて、自然な歌詞にまとめてくれます。
  • 歌にする: さらに、その歌詞に合わせて、AI が「あなたの感情に合う曲」を即興で作ってくれます。
  • 視覚で楽しむ: 音が聞こえなくても、歌詞やリズムが「色や動き」で画面に浮かび上がるので、視覚的に音楽を楽しめます。

🌱 3. 実験:3 週間の「音楽日記」

12 人のろう者の方に、このシステムを使って 3 週間、毎日(または週に数回)歌を作る実験をしてもらいました。まるで**「音楽版の日記」**をつけるようなイメージです。

発見された 3 つの大きな変化

この実験から、参加者の方たちの心に以下のような変化が起きていることが分かりました。

① 「鏡」を見て、自分を知る(自己洞察)

AI と会話しながら歌詞を作る過程で、**「あ、自分は実はこんなに辛かったんだ」「こんな風に思っていたんだ」**と、自分の気持ちに気づくようになりました。

  • 比喩: 普段は曇った鏡で自分の顔を見ていますが、AI という「磨き上げられた鏡」を通して、自分の心の表情を鮮明に見ることができるようになったのです。

② 感情を「外」に出して、整理する(感情の調整)

AI が作った歌詞は、自分の言葉をそのまま反映しつつ、少し客観的な形(詩のような形)に整えてくれます。これにより、「辛いこと」を「自分ごと」から「物語」へと変換できました。

  • 比喩: 心の中に溜まったモヤモヤした雲を、AI という「魔法の漏斗」に通して、きれいな「歌」という形にして外に出すことで、心が軽くなりました。

③ 歌が「心の薬」になる(態度の変化)

作った歌は、ただの記録ではありません。辛い時にその歌を聴き返すことで、「大丈夫、乗り越えられる」という勇気を得たり、家族や友人に自分の気持ちを伝えやすくなったりしました。

  • 比喩: 作った歌は、**「心の非常用持ち出し袋」**のようなものです。辛い時に開けて、中に入っている「勇気」や「希望」を取り出して使えるようになりました。

🧩 4. なぜ「AI」が重要なのか?

もし AI がいなければ、音楽の知識がない人が「自分の気持ちを歌にしよう」とするのは、**「楽器も持たずに、いきなりオーケストラを指揮する」ような難しいことでした。
でも、このシステムを使えば、
「言葉で話すだけで、プロのオーケストラがあなたの気持ちを演奏してくれる」**ような感覚になります。技術の壁を取り払ったことで、誰でも自分の内面を表現できるようになったのです。

💡 まとめ

この研究は、**「AI は単なる便利な道具ではなく、心のケアをするパートナーになり得る」**ことを示しています。

ろう者の方々が、歌を作るという「創造的な遊び」を通じて、毎日少しずつ自分を理解し、受け入れ、前向きに生きていけるようになる。そんな未来を「ソウルノート」は切り開こうとしています。

一言で言えば:

「AI と一緒に歌を作ろう!それは、自分の心を癒やし、強くする『魔法の日記』になるよ。」