Closing the Benchmark Gap in Browser-Extension Proctoring: A Formally Specified, Reproducibly Evaluated Architecture for Real-Time, BYOD-Compatible Examination Malpractice Detection

現代の教育界において、ペーパー試験からコンピュータベースのテストへの移行は、紛れもない効率性をもたらした一方で、物理的な痕跡を残さない新しい種類の不正行為への扉を開いてしまった。従来の試験会場では、試験監督は学生が隠したカンニングペーパーを見ていたり、隣人とささやき合っていたりするのを視認できる。しかし、コンピュータの場合、学生は単に試験ウィンドウから離れて禁止されたウェブサイトをチェックしたり、問題をコピーしたり、別のブラウザタブに切り替えたりすることができ、その間も試験画面は開いており、アクティブであるように見える。これは「コンテキスト・スイッチング」として知られており、学校にとって困難なジレンマを生み出している。これを阻止するために、教育機関は伝統的に、試験以外のあらゆるアクセスを禁止してコンピュータ全体をロックダウンする、強力なソフトウェアに頼ってきた。この手法は効果的ではあるものの、学生が自分の個人用デバイスに対して持っていない管理者権限を必要とするため、「自分のデバイスを持ち込む（BYOD）」ポリシーにおいて、学生が自分のノートパソコンを教室に持参する場合には使用不可能となる。ウェブカメラを使って学生を監視するといった他の解決策は、高いインターネット速度を要求し、深刻なプライバシーの問題を引き起こす。

ナイジェリアのカドゥナにある空軍技術研究所の研究者たちは、今、コンピュータをロックダウンしようとするのではなく、ブラウザウィンドウ自体を監視するという新しいアプローチによって、この空白を埋めようとしている。彼らは、試験中にブラウザ内で動作する軽量なソフトウェア・アドオン、すなわち拡張機能を構築し、テストを行った。マシン全体を支配する重いソフトウェアとは異なり、このツールはブラウザ内で静かに動作し、新しいタブを開く、試験ウィンドウを最小化する、あるいはテキストをコピーするといった特定の動作を監視する。チームは単にこのツールを構築しただけでなく、それがどれほど正確に機能し、どれほど速く反応し、どれほどの電力を消費するかを正確に測定するために、厳格な制御実験を行った。彼らの目標は、商業企業のマーケティング上の主張を超えて、この技術がハイステークスな試験を任せるのに信頼できるほどであるかどうかについて、学校に確かな独立したデータを提供することであった。

研究者たちは、ブラウザ内のデジタル・ウォッチドッグとして機能する「ホストベース不正行為検出システム」と呼ばれるシステムを開発した。学生が試験を開始すると、システムはその特定のブラウザウィンドウ内でのあらゆる動きの監視を開始する。もし学生が別のタブに切り替えようとすれば、システムは即座にその変化を捉える。もし学生がコードを検査するためにデベロッパーツールを開こうとしたり、試験内容をコピー＆ペーストしようとしたりすれば、システムはそのアクションをフラグ立てする。極めて重要なのは、システムが特定の種類の「沈黙」も監視することである。もし学生のブラウザと試験サーバーとの間の接続が切断された場合、システムは学生が監視を無効にしようとした可能性があると想定する。これに対処するため、ソフトウェアは10秒ごとに、心拍（ハートビート）のような非常に小さな定期信号をサーバーに送信する。もしサーバーが一定期間これらの信号を受信できなくなった場合、システムは人間に異常を知らせる。この設計により、システムは特別なインストール権限を必要とせずにあらゆる個人用コンピュータ上で動作することができ、多くの学校が現在好んでいる「自分のデバイスを持ち込む」ポリシーとの互換性を確保している。

このシステムが現実世界で実際に機能するかを確認するため、チームは学術的不正行為の環境をシミュレートした一連の自動テストを実施した。彼らは50人の学生が同時に試験を受けているシナリオを作成し、タブの切り替え、ウィンドウの最小化、テキストの切り取り貼り付けといった500種類の不正なアクションを実行するようにスクリプトをプログラムした。システムはこれらの試みを検知することにおいて驚くべき効果を発揮した。タブの切り替えやクリップボードのアクションについては、100パーセントの確率で検知することに成功した。学生が試験ウィンドウを隠そうとするウィンドウの最小化に関しては、150回の試行のうちわずか3回を除いて、大部分の試行を捉えた。これらの数少ないミスは、学生がウィンドウを切り替える速度があまりに速く、ブラウザの内部処理がその変化を登録できなかった場合にのみ発生した。全体として、システムはブラウザ内で発生するアクションに対して99.5パーセントの検出精度を達成した。

スピードもまた、研究者が測定した重要な要素であった。ライブ試験においては、警告はプロクター（試験監督）にほぼ即座に届く必要がある。チームは、違反が発生した場合、標準的なWi-Fi接続下で、システムが管理者のダッシュボードにアラートを送るまでの平均時間は450ミリ秒であることを発見した。これは0.5秒未満であり、プロクターは学生が不正行為を行おうとした瞬間に警告を目にすることになる。また、システムはコンピュータのリソースに対しても非常に低負荷であることが証明された。古い重厚なロックダウン・ソフトウェアは、コンピュータの処理能力のほぼ半分を使用することがあるが、この新しいブラウザ拡張機能はCPU使用率の8パーセント未満しか使用せず、メモリもほとんど必要としなかった。この低いリソース占有率こそが、学生の古いノートパソコンでも動作を遅らせることなく実行できることを可能にしており、より侵入的な代替案に対する大きな利点となっている。

研究者たちはまた、「ハートビート」タイマー（接続が失われたと判断するまで待機する時間を決定するもの）をどのように設定すべきかについても調査した。もしタイマーを短く設定しすぎると、Wi-ッションが一時的に途切れただけで、システムは学生を学術的不正行為で誤って告発してしまう可能性がある。もし長く設定しすぎると、学生がソフトウェアを無効化し、誰にも気づかれることなく長時間にわたって不正行為を行う可能性がある。さまざまな時間制限をテストすることで、チームは45秒の待機時間が「スイートスポット」であることを発見した。この期間は、通常の短いWi-Fiの瞬断を無視できるほど十分に長い安全マージンを提供し、結果として誤報率をわずか2.1パーセントに抑えつつ、意図的な切断を素早く捉えることができるほど十分に短いものであった。この知見は、学校がどこでも単一の固定されたタイマー設定を使用すべきではなく、特定のインターネット接続の品質に基づいてこれを調整すべきであることを示唆している。

これらの印象的な結果にもかかわらず、研究者たちは、自分たちのシステムが何を行い、何を行えないのかを明確に定義することに慎重である。このシステムは、ブラウザウィンドウ内で起きることのみを監視するように設計されている。学生が答えを調べるために二つ目のスマートフォンを使用しているかどうかを、システムは見ることができない。また、学生が別のコンピュータや隠れた仮想マシンを使用して他のソフトウェアを実行していることも、システムは検知できない。これらはブラウザの外側に存在する脅威であり、研究者たちは自分たちのツールでは対処できないことを認めている。そのような種類の学術的不正行為に対しては、物理的な監督やその他のセキュリティ対策が依然として必要である。また、本研究は実際の学生が実際の試験を受けているのではなく、自動化されたスクリプトを用いた制御されたラボ環境で実施された。これにより精密な測定が可能となったが、研究者たちは、乱雑なインターネット接続や予測不可能な人間行動を伴う現実世界の状況では、結果が若干異なる可能性があると指摘している。

この研究の真の価値は、学術的不正行為を捕まえるための全く新しい方法を発明したことではなく、すでに広く利用されているものの理解が進んでいないテクノロジーに透明性をもたらしたことにある。多くの学校は現在、学術的不正行為の問題を解決すると約束する商業製品に依存しているが、これらの製品が実際にどれほど正確で、どれほど速いかを測定した独立した査読付きの研究はこれまで存在しなかった。この技術のオープンで文書化されたバージョンを構築し、厳格にテストすることで、研究者たちは業界に対する最初の明確なベンチマークを提供した。彼らは、軽量なブラウザ拡張機能が、重いリソースを要求したり学生のプライバシーを侵害したりすることなく、非常に高い精度と速度を実現できることを示した。このエビデンスにより、教育機関はマーケティングの主張ではなく事実に即した決定を下すことが可能となり、学生が自分のデバイスを持ち込む教室において、安全なテストへの実現可能な道筋を提示している。