Beyond Clicks: Identifying an Engagement-Performance Paradox in Vocational College Online Learning Through Behavioral Profiling
この職業専門学校生の調査は、プラットフォーム上での活動量が多いことが学習の成功を保証するわけではないというエンゲージメントとパフォーマンスのパラドックスを明らかにしており、「表面的なエンゲージャー（Surface Engagers）」は膨大なクリック数を記録したにもかかわらず最も低い試験スコアとなった一方で、「戦略的学習者（Strategic Learners）」は大幅に少ないインタラクションでトップの成績を収めており、エンゲージメントの質がクリックの量よりも重要であることを示している。
原論文は CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/) でライセンスされています。 これは以下の論文のAI生成解説です。著者が執筆または承認したものではありません。技術的な正確性については原論文を参照してください。 免責事項の全文を読む
現代の教室では、チョークの粉やチャイムの音ではなく、デジタル上の足跡によって静かな革命が起きている。学生がオンライン学習システムにログインしたり、動画をクリックしたり、メッセージを投稿したりするたびに、プラットフォームはその出来事を記録する。教育者や研究者にとって、このデータの奔流は魅力的な約束を提示している。すなわち、学生が何をしているかを見ることができれば、彼らがどのように学んでいるかを理解できるという約束である。支配的な仮定は単純かつ直感的であった。それは、「活動量が多いことは、学習量が多いことを意味する」というものだ。もし学生が講義を視聴し、あらゆる課題をクリックして何時間も費やしているなら、彼らは熱心に取り組んでおり、熱心に取り組んでいるならば、成功しているはずだ。この考え方は、多くの学校制度の基礎となっており、高いクリック数を健全な学生の兆候とし、活動量の低さを脱落の可能性がある者への警告フラグとして、学生の進捗を追跡するために利用されている。
しかし、この論理は脆弱な前提に基づいている。それは、「目に見える行動の表面は、常に目に見えない思考の深さと一致する」というものである。教育、特にコーディングやウェブデザインのような実践的なスキルを学ぶ職業訓練の世界においては、学生が行うことと、実際に学んでいることの関係は、決してそれほど単純ではない。研究者たちは以前から、学生は「忙しくても生産的ではない」ことがあり、「静かであっても迷子ではない」こともあるのではないかと疑ってきた。私たちが学習を測定するために使用しているデジタルツールが、実際に真実を見せる助けとなっているのか、それとも単にノイズを数えているだけなのかという問いは、依然として残っている。
中国東部の職業専門学校のある研究者は、ブレンディッド・ラーニング（対面授業とオンライン学習の併用）形式のウェブ開発コースを受講している218人の学生のデジタル生活を詳細に調査することで、この仮定を検証しようとした。そのコースは、伝統的な対面授業とオンラインモジュールを組み合わせたものであり、ログイン頻度からディスカッションへの投稿数に至るまで、あらゆることを追跡する豊かなデータストリームを生み出していた。研究者は、すべての学生を平均化して扱うのではなく、実際の行動パターンに基づいて学生をグループ化する手法を用いた。彼らは6つの特定の行動に着目した。タスクの完了数、動画の視聴時間、チャプターの開封回数、ログイン回数、ディスカッションへの投稿数、そして対面授業への出席回数である。これらのパターンを分析することで、彼らは学生が「低エンゲージメント」から「高エンゲージメント」へと単純な一本の線上に並んでいるわけではないことを発見した。代わりに、それぞれがコースとの独自の関わり方を持つ、4つの明確なグループが浮かび上がった。
第一のグループは「ディープ・エンゲイジャー（深く関わる学習者）」と呼ばれ、モデル学生が期待される通りの振る舞いを見せた。彼らは割り当てられたほぼすべてのタスクを完了し、1,100分以上の指導動画を視聴し、ほぼすべての授業に出席した。また、オンラインでの議論にも精力的に参加した。当然ながら、これらの学生は試験で最も高いスコアを記録し、平均は100点満点中85.7点であった。第二のグループである「ストラテジック・ラーナー（戦略的学習者）」は、クラスの約3分の1を占める最大のグループであった。これらの学生は驚くほど効率的であった。彼らはディープ・エンゲイジャーよりも動画視聴時間が大幅に少なく、完了したタスクも少なく、ログイン回数も約3分の1にとどまっていた。それでも、彼らは定期的に授業に出席し、議論にも積極的に参加していた。結果は驚くべきものであった。彼らの試験スコアはディープ・エンゲイジャーと統計的に同一であり、平均83.5点であった。これは、彼らがプラットフォーム上での活動量を大幅に抑えながらも、トップレベルの結果を出したことを証明している。
第三のグループである「パッシブ・フォロワー（受動的な追随者）」は、期待通りの意欲低下のパターンを示した。彼らはログインは稀であり、動画視聴もほとんど行わず、授業への出席も半分以下であった。彼らの試験スコアはこの関与の欠如を反映しており、平均は62.5点であった。しかし、第四のグループこそが、「活動量＝学習量」という一般的な仮定に対する最も決定的な欠陥を露呈させた。このグループは「サーフェス・エンゲイジャー（表面的な学習者）」と名付けられ、予想を完全に裏切る行動をとった。彼らは頻繁にログインし、900分近い動画を視聴し、タスクの9割近くを完了させていた。あらゆるプラットフォーム活動の指標において、彼らは高いパフォーマンスを示す学生のように見え、ディープ・エンゲイジャーに次ぐ順位に位置していた。デジタル上のあらゆる記録によれば、彼らは非常に「忙しかった」のである。
しかし、最終的な成績が集計されたとき、サーフェス・エンゲイジャーはどのグループよりも低いスコア、平均47.8点という不合格レベルの成績であった。彼らは、プラットフォームにほとんど触れていなかったパッシブ・フォロワーよりも成績が悪かった。ここにパラドックスが生じた。システム上で最も活動的に見えた学生たちが、実は最も学んでいなかったのである。研究者は、その違いは学生がプラットフォームでどれだけの時間を過ごしたかではなく、その時間をどのように使ったかにあることを突き止めた。サーフェス・エンゲイジャーは孤立して活動していた。彼らは動画を視聴し、演習を次々とクリックしたが、授業への出席や議論への参加はほとんど行わなかった。対照的に、ストラテジック・ラーナーとディープ・エンゲイジャーは、どちらもインタラクティブな参加を優先していた。データは、単にプラットフォーム上に存在しているだけでは不十分であることを示していた。つまり、他者と対話し、実際に現場に足を運ぶという「エンゲージメントの質」こそが、成功を左右する要因であった。
これを裏付けるために、研究者は2つの主要な行動タイプを別々の要因として扱う統計分析を行った。その結果、ディスカッションへの参加度と授業への出席度を考慮に入れた後では、プラットフォーム上の純粋な活動量は、むしろ試験の低スコアを予測する要因になることが判明した。これは、一部の学生にとって、高い活動量が「学習のためではなく、単に成績を取るためのタスク完了」という戦略、あるいは苦戦している兆候であったことを示唆している。本研究の結論は、クリック数を数えることは学習を測定する方法としては不適切であるということだ。実践的なスキルがコラボレーションやフィードバックを通じて構築される職業教育においては、最も重要な行動とは、単にデジタル上のノイズを発生させるものではなく、他者と関わる行動なのである。最も多く学んだ学生たちは、必ずしもオンラインで最も長い時間を過ごした人々ではなく、その時間を仲間や指導者との繋がりを作るために活用した人々であった。
自分の分野の論文に埋もれていませんか？
研究キーワードに一致する最新の論文のダイジェストを毎日受け取りましょう——技術要約付き、あなたの言語で。