PREVIEW-A&F: a mixed-methods eye-tracking methodology for prospective optimisation of electronic audit and feedback interventions
この概念実証研究は、大規模な実装の前に、電子的な監査およびフィードバック介入におけるエンゲージメントの障壁を前向きに特定し対処するために、客観的な注視データと質的な思考発話プロトコルを統合した、理論に基づいた混合研究法によるアイトラッキング手法の実現可能性を実証するものである。
原論文は CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/) でライセンスされています。 これは以下の論文のAI生成解説です。著者が執筆または承認したものではありません。技術的な正確性については原論文を参照してください。 免責事項の全文を読む
あなたは、新しい料理の完璧なレシピを作ろうとしているシェフだと想像してください。あなたは材料(データ)を知っており、ゴール(美味しい食事)も分かっていますが、実際に誰かがそれを食べているところを見たことは一度もありません。ヘルスケアの世界では、医師や看護師は「監査とフィードバック」のレポートを受け取ることがよくあります。これは、彼らが同僚と比較してどの程度うまくやっているかを伝える栄養ラベルやスコアカードのようなものです。目的は、塩分を控えめにしたり、特定のスパイスを使ったりするように、彼らの習慣を変えるきっかけを与えることです。しかし、ここに落とし穴があります。単にスコアカードを手渡したところで、彼らがそれを実際に読んだり、理解したり、あるいは調理法を変えるきっかけにしたりするとは限りません。レポートがあまりに分かりにくかったり、退屈すぎたりすると、医師はそれをちらりと見ただけで、肝心な点を見逃して通り過ぎてしまうことがあります。
ここで、「実装科学(implementation science)」と呼ばれる分野が登場します。それは、なぜ素晴らしいアイデアが現実の世界で定着しないのかを突き止めようとする、探偵チームのようなものです。彼らは、スコアカードが機能するためには、それを読む人が実際に「関与(エンゲージ)」しなければならないことを知っています。しかし、誰かが本当に注意を払っているかどうかを、どうすれば知ることができるでしょうか?「これを読みましたか?」と聞くのは難しい作業です。なぜなら、人は礼儀として「はい」と言ったり、あるいは自分が意識を飛ばしていたことにさえ気づいていなかったりするからです。この論文は、2つのツールを組み合わせることで、このパズルを解く巧妙な新しい方法を探求しています。一つは、あなたの目がどこを見ているかを正確に追跡するハイテクカメラ、もう一つは、ビデオゲームのストリーマーのように自分の思考を実況する「思考発話(think-aloud)」セッションです。大きな疑問は、新しいシステムを何千人もの人々に展開する前に、スコアカードが本当に機能するかどうかを確認するために、医師の脳内を覗き見ることができるのか?ということです。
アイ・トラッカー探偵事務所
メルレナ・クライク氏率いるメルボルン大学の研究チームは、デザインのための「タイムマシン」を作ることに決めました。新しい電子レポートを何百人もの医師に送って、うまくいくことを祈って待つのではなく、その前にテストしたいと考えたのです。彼らはPREVIEW-A&Fという手法を作り上げました。これは演劇のドレスリハーサルのようなものですが、俳優の代わりにデジタルレポートをテストし、ステージの代わりにスマートグラスを使用します。
その手順はこうです。彼らは、ペニシリンアレルギーに取り組んでいる医師と薬剤師のグループ(iNAANというプロジェクト)で使用されている実際のレポートを取り上げました。そして、14人の医療専門家を招き、視線追跡機能付きの特別なメガネを着用して、画面上のレポートを見るよう依頼しました。これらのメガネは、小さな目に見えないスポットライトのように、その人がどこを見ているか、特定の数字をどれくらいの時間凝視しているか、そして視線がどこへ彷徨っているかを正確に記録します。
しかし、見るだけでは不十分です。研究者たちは医師たちに「思考発話(think-aloud)」プロトコルを行うよう求めました。レポートをスクロールしながら、自分が何を考えているのか、何に混乱しているのか、そして何を解明しようとしているのかを、そのまま言葉に出して説明してもらったのです。それは、車の助手席に乗っている人が、曲がり角、標識、そして道に迷った瞬間の一つひとつを実況しているようなものです。
3つの注意レベル
このデータを理解するために、チームはレポートの各部分がどの程度の注意を引くべきかを分類するシンプルな方法を考案しました。彼らは3つのエンゲージメント・レベルを想定しました。
- 瞥見(Glance): 街路標識を見るようなものです。そこに存在することを知っていれば十分であり、細かい文字を読む必要はありません。
- 注視(Look): メニューを読むようなものです。選択をするために、情報を抽出する必要があります。
- 精査(Scrutinise): 複雑な法的契約書や医学的診断を読むようなものです。じっと見つめ、深く考え、他のものと比較し、次に何をすべきかを判断する必要があります。こここそが、実際の行動変容が起こるべき場所です。
チームは実験を開始する前に参照シートを作成しました。どの部分が「瞥見」され、どの部分が「注視」され、どの部分が「精査」される必要があるかを予測しました。そして、その予測をアイトラッキング・グラスが実際に捉えたデータと比較しました。
大いなる判明:目と脳が一致しない場所
魔法は、アイトラッキングのデータと「思考発話」のストーリーを組み合わせた時に起こりました。彼らは、時として「目が行っていること」と「脳が考えていること」が一致しないことを発見しました。彼らは結果を4つの主要なカテゴリーに分類し、それを用いてレポートを修正しました。
1. 完璧な一致(収束型 / Convergent)
レポートの29箇所のうち14箇所において、すべてが完璧でした。医師たちは正しい場所を正しい時間だけ見ており、彼らの「思考発話」は、彼らが内容を理解し、自身の診療を変える方法について考えていることを示していました。それは、学生が教科書を読み、重要な文章にハイライトを引き、そしてクイズの質問に正しく答えているような状態でした。これらの部分は準備が整っていました。
2. 隠れた罠(隠れた機会 / Hidden Opportunity)
ここからが非常に興味深いところです。レポートのある箇所では、医師たちは(チームが期待した通りに)長時間じっと見つめていました。しかし、彼らが言葉にしたとき、彼らは混乱していたのです!彼らは数字を凝視してはいましたが、それが何を意味するのか理解していませんでした。それは、外国語のメニューをじっと見つめているようなものです。熱心に見ているものの、実際には情報を「食べて」いないのです。もし研究者がアイトラッキングのデータだけを見ていたら、「素晴らしい、彼らは注意を払っている!」と考えていたでしょう。しかし、「思考発話」が罠を暴きました。デザインが混乱を招いていたのです。これは、ラベルを分かりやすく修正するための「隠れた機会」でした。
3. スピードラン(注意の不一致 / Attentional Mismatch)
8つのケースでは、医師たちは予想とは異なる時間だけレポートの一部を見ていましたが、それでも内容は理解していました。時には、デザインが混雑していたために情報を探す必要があり、長く見すぎてしまうこともありました。また、見る時間は非常に短かったものの、「思考発話」によれば、情報を極めて迅速かつ効率的に処理できていたこともありました。それは、プロゲーマーがレベルを記録的な速さでクリアするようなものです。初心者よりも画面を凝視していませんが、それでも勝利しています。研究者たちは、これらの中にはデザインが予想以上にうまく機能しているものもあれば、人々が苦労せずに済むようにデザインをより明確にする必要があるものもあることに気づきました。
4. 完全な失敗(分岐型 / Divergent)
3つの箇所では、計画が完全に崩壊しました。医師たちはそれらを十分な時間見ることなく、見たとしても、混乱しているか、あるいは単に無視していました。それは、茂みの後ろに隠れた標識のようなものであり、たとえ人々が見つけたとしても、それは別の町へ向かうためのものだと勘違いしてしまうようなものです。これらは最大のレッドフラッグ(警告)でした。研究者たちは、ある特定のチャートについて、データが完璧(不良事象ゼロ)であったため、医師たちが「修正すべきことは何もない」と感じ、注意を払うのを止めてしまったことを突き止めました。デザインがこの「天井効果(ceiling effect)」を考慮していなかったのです。
なぜこれが重要なのか
この論文が示唆する最も重要なことは、ツールを構築して、それがうまくいくのをただ待つべきではない、ということです。科学者のように、事前にテストすべきだということです。スマートグラスと思考発話を用いることで、チームはそうでなければ見えなかったであろう問題を発見しました。もし彼らが単に医師たちに「レポートはどうでしたか?」と聞いていたら、医師たちは「ええ、問題なかったようです」と答え、混乱した部分はそのまま放置されていたでしょう。
この研究は、医師の行動を変える問題を永遠に解決したと主張しているわけではありません。これは、エンジンのチューニングを行うための「テストドライブ」のような、概念実証(プルーフ・オブ・コンセプト)です。著者たちは、もし私たちがこうした「インターフェース・レベルの障壁」を早期に修正することができれば、多くの時間と費用を節約できるだろうと示唆しています。壊れたレポートをリリースし、それが失敗するのを数ヶ月待ち、それから修正を試みるのではなく、ソフトウェアがまだガレージにあるうちにバグを捕まえることができるのです。
結局のところ、この論文は、優れたデザインとは単に見た目を美しくすることではなく、人間の脳が実際に情報と結びつくようにすることであると主張しています。目がどこへ向かい、心が何を語るかを観察することで、私たちは医師が患者を助けるための、より良いツールを構築できるのです。
自分の分野の論文に埋もれていませんか?
研究キーワードに一致する最新の論文のダイジェストを毎日受け取りましょう——技術要約付き、あなたの言語で。