Designing a motion-controlled game framework to develop bodily–kinesthetic intelligence in deaf and hard-of-hearing children
本研究は、Kinectを用いた全身インタラクションと振動によるリズムキューを通じて、ろう者および難聴児の身体運動的知能を効果的に高める、ユニバーサルデザインに基づいたモーションコントロールゲーム「My Super Power」であるMBDフレームワークの開発と評価を提示するものである。
原論文は CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/) でライセンスされています。 これは以下の論文のAI生成解説です。著者が執筆または承認したものではありません。技術的な正確性については原論文を参照してください。 免責事項の全文を読む
数十年にわたり、教育者や心理学者は、学習とは単に静かな心の中で起こる精神的なエクササイズではないことを認識してきました。それは、空間の中を身体を動かすことと深く結びついた、身体的な行為なのです。この概念は「身体運動的知能」として知られており、私たちの問題解決能力や世界の理解力は、筋肉、バランス、そして協調性を用いる能力と密接に関連していることを示唆しています。聴覚障害や難聴のある子供たちにとって、このつながりは特に重要です。彼らは音によって動きを導いたり、他者と同期したりすることに頼れないため、運動スキルや空間認識の発達において特有の課題に直面することがよくあります。伝統的な教室は、話し言葉による指示や聴覚的な合図に依存することが多いため、意図せずしてこれらの子供たちを取り残し、彼らの真の可能性を覆い隠してしまうことがあります。研究者たちの間では、子供たちの完全な身体的・認知的能力を解き放つために、聴覚に頼ることなく、身体に直接語りかけるような学習ツールの創出が長年の課題となってきました。
中国と香港の研究チームは、聴覚障害や難聴のある子供たちの身体のために特別に設計されたビデオゲームを構築することで、この問いに答えようと決意しました。彼らは既存のゲームに効果音を追加したり、標準的なゲームの音を大きくしたりしたわけではありません。代わりに、彼らは「マイ・スーパー・パワー（My Super Power）」と呼ばれる新しい種類のデジタル体験を生み出しました。これは、プレイヤーの全身がコントローラーとなるモーションコントロール型のロールプレイングゲームです。動きを追跡するカメラシステムを使用し、子供たちのジャンプ、腕の振り、手のジェスチャーを画面上のアクションへと変換します。音によるリズムやタイミングの合図に代わるものとして、研究者たちはプレイヤーの前腕に振動センサーを装着しました。これらのデバイスは、動くべきタイミングを知らせるために脈動し、子供たちが音を聞くのではなく、ビートを「感じる」ことを可能にします。その目的は、この特定のタイプの遊びが、子供たちの身体運動的知能を強化し、動きの調整、動作のシーケンスの計画、そして空間における自分の位置の把握を助けることができるかどうかを確認することでした。
研究には、北京のろう学校に通う8歳から10歳の子供35名が参加しました。約90分間の1回のセッションを通じて、子供たちはゲームの4つのチャプターをプレイしました。物語の中では、彼らは様々なキャラクターが「スーパーパワー」を取り戻すのを助けるために、身体的な課題をクリアしていきます。あるチャプターでは、腕を振ることで大きなキャンバスに色を塗ることが求められ、別のチャプターでは、精密な手の動きでパーツを持ち上げ、配置することでロケットを組み立てることが求められました。3つ目のチャプターでは、振動センサーを通じて感じるリズムに合わせて踊り、最後のチャプターでは、障害物コースを通り抜け、ケーキの材料を混ぜ合わせるという挑戦が待っていました。研究者たちは、ゲームを開始する前と終了直後の子供たちの能力を測定しました。彼らは、子供たちが特定の身体的タスクをどの程度遂行できたか、自身のスキルをどのように表現したか、そしてインタビューを通じて体験について何を語ったかを調査しました。
結果は、子供たちの能力における明確かつ有意な変化を示しました。ゲームをプレイした後、子供たちは以前苦戦していた身体的タスクにおいて、明らかに向上していました。彼らはより正確に動き、タスクをより速く完了し、複雑な運動パターンを記憶し繰り返す能力も高まりました。おそらくさらに重要なのは、子供たちの自己認識の変化です。ゲームの前、多くの子供たちは自身の身体的能力に対して躊躇したり、自信がなかったりしていました。しかしその後、彼らは自分自身に対してより自信を持ち、有能であると感じていると報告しました。インタビューの中で、彼らはゲームについて熱狂的に語り、全身を使ってキャラクターを操作できることや、振動センサーがタイミングを合わせるのに役立ったことを説明しました。ある子供は、モバイルゲームは指だけを使うが、このゲームは全身を動かすので、違った感覚でエキサイティングだったと述べました。また、普段はクラスで静かな子供が、プレイ中の仲間に対して戦略を熱心に説明するほど活発になっていました。
研究者たちは、このゲームが複雑な動きを小さく管理しやすいステップに分解し、失敗を恐れることなく繰り返し練習できるようにしたことで機能したことを発見しました。もし子供がジャンプをミスしたりアイテムを落としたりしても、ゲームは彼らを罰付けるのではなく、すぐに再挑戦することを促しました。この「失敗を糧にする（fail-forward）」設計が、子供たちが困難な課題に粘り強く取り組むことを助け、試行錯誤のたびに達成感を積み重ねることに繋がりました。プレイヤーがヒーローとして他人を助けるというゲームの物語も、極めて重要な役割を果たしました。それは子供たちに課題に取り組む理由を与え、身体的なエクササイズを意味のあるミッションへと変えたのです。振動センサーは主要な革新であり、音楽を聞けない子供たちにリズムとタイミングを教えるための信頼できる方法を提供しました。肌でビートを感じることで、彼らは聴覚を持つ子供たちと同じように効果的に動きを同期させることができました。
本研究は、細心の注意を払い、包括性を考慮して設計されたモーションコントロールゲームが、聴覚障害や難聴のある子供たちの身体的・精神的スキルを発達させる強力なツールになり得ることを示唆しています。研究者たちは、将来のゲーム制作の指針となる「MBDフレームワーク」を開発しました。このフレームワークは、空間認識や運動計画といった特定の学習目標を、どのようにアクセシブルなゲームメカニクスへと変換するかを概説しています。それは、世界と相互作用するための主要な手段として身体を用いることの重要性を強調しており、聴覚に依存しない学習への道を提供しています。今回の研究は短期的であり、即時的な改善に焦点を当てたものでしたが、その知見は、適切な種類のデジタルインタラクションを通じて、これらの子供たちが持つ身体的学習の強い潜在能力が解き放たれ得ることを示しています。この取り組みは、テクノロジーが単に眺めるためのスクリーンではなく、動きを通じて通り抜ける空間となり、あらゆる能力を持つ子供たちが行動を通じて自らの知性を表現できる未来へと向かっています。
自分の分野の論文に埋もれていませんか？
研究キーワードに一致する最新の論文のダイジェストを毎日受け取りましょう——技術要約付き、あなたの言語で。