Gamification as a Buffer Against Disengagement: Evidence from a Within-Subject

기술 요약: 몰입 저하에 대한 완충제로서의 게이미피케이션

문제 제기
온라인 학술 환경에서 학생의 참여(engagement)는 다면적인 과제로 남아 있으며, 특히 물리적 신호가 부재하고 교수자의 지원이 제한적인 디지털 학습 맥락에서 그러하다. 학습 관리 시스템(LMS)은 고등 교육에 널리 통합되어 있으나, 학생들은 종종 자율적인 과업 수행과 생소한 인터페이스 탐색에 어려움을 겪으며, 이는 시간이 지남에 따라 참여도에 부정적인 영향을 미친다. 기존 문헌은 단일 학습 환경이나 특정 기술을 개별적으로 조사하는 경우가 많아, 동일한 교수 맥락 내에서 서로 다른 기술적 학습 환경 간의 직접적인 경험적 비교가 부족하다. 구체적으로, 게이미피케이션이 적용된 LMS 환경이 전통적인 비게이미피케이션 환경과 비교하여 행동적 참여 패턴, 퀴즈 성취도, 그리고 참여 저하(disengagement) 방지 측면에서 어떻게 다른지에 대한 이해가 필요하다.

연구 방법론
본 연구는 키프로스 국제 대학교(Cyprus International University)의 인터넷 프로그래밍 수강생인 학부 IT 전공생 60명을 대상으로(제외 후 최종 샘플 $n=32$) 준실험적, 피험자 내 교차 설계(within-subject crossover design)를 채택하였다.

• 설계: 참가자들은 전통적인 비게이미피케이션 Moodle 환경과 게이미피케이션이 적용된 Moodle 환경을 모두 경험하였다. 순서 효과를 통제하기 위해 노출 순서를 무작위로 배정하였다.
• 중재(Interventions):
  • 비게이미피케이션 조건: 유희적 요소가 제거된 표준 객관식 퀴즈를 활용하였으며, 이는 실험 대조군 역할을 하였다.
  • 게이미피케이션 조건: 상호작용성, 시각적 흥미, 즉각적인 피드백 루프와 같은 게임 메커니즘을 포함하는 크로스워드 기반 퀴즈를 활용하였다.
• 콘텐츠 동일성: 두 환경 모두 동일한 주제를 다루었으며, 퀴록의 난이도와 배점(전체 성적의 10%)은 동일하게 설정하였다.
• 측정 도구: 참여도는 활동 전후로 실시된 14개 문항의 설문지를 통해 측정되었다. 해당 척도는 내부 일관성(Cronbach's $\alpha$ .95 ~ .98)과 단일 차원성에 대해 타당성을 검증받았다. 자기 보고된 행동적 노력(behavioral effort)을 구체적으로 테스트하기 위해 전용 4개 문항의 "행동 참여 하위 척도(Behavioral Engagement Subscale)"를 분리하였다. 퀴즈 성과는 점수를 통해 측정되었다.
• 분석: 데이터 분석에는 대응 표본 t-검정(paired-sample t-tests), 비정규성에 대한 강건성을 위한 윌콕슨 부호 순위 검정(Wilcoxon signed-rank tests), 조건-기초 참여도 상호작용을 테스트하기 위한 선형 혼합 효과 모델(linear mixed-effects models), 신뢰 변화 지수(RCI) 분류, 사람 중심 프로파일링을 위한 k-평균 군집 분석(k-means cluster analysis), 그리고 베이지안 강건성 체크(JZS Bayes factors)가 포함되었다.

주요 결과

1. 참여 추세: 비게이미피케이션 환경에서는 참여 점수가 유의미하지 않은 하향 추세를 보였다(사전 검사 평균 = 3.516, 사후 검사 평균 = 3.203). 반면, 게이미피케이션 환경은 참여도의 증가라는 유망한 결과를 보여주었다(사전 검사 평균 = 3.328, 사후 검사 평균 = 3.59; $p = .051$). 이는 게이미피케이션이 학생 참여를 높일 것이라는 가설과 일치하지만, 사전-사후 비교에서 전통적인 통계적 유의 수준에는 도달하지 못했다.
2. 성과 결과: 학생들은 비게이미피케이션 환경(평균 = 7.56)보다 게이미피케이션 환경(평균 = 9.642)에서 유의미하게 높은 퀴즈 점수를 기록하였다. 선형 혼합 모델은 통계적으로 유의미한 플랫폼 유형 효과($p < .001$)를 확인하였으며, 게이미피케이션 환경의 학생들이 평균 1.32점 더 높은 점수를 얻었다.
3. 기초 참여도와의 상호작용: 조건과 기초 참여도 사이에 유의미한 상호작용이 발견되었다 ($p < .001$). 비게이미피케이션 조건에서는 기초 참여도가 높을수록 참여도의 하락 폭이 더 컸다. 게이미피케이션은 이 기울기를 실질적으로 감소시켰으며, 특히 낮은 기초 참여도를 가진 학생들에게 참여 저하에 대한 완충제 역할을 하였다.
4. 신뢰 변화: RCI 분석 결과, 신뢰할 만한 개선율은 두 조건 간에 유사했으나, 신뢰할 만한 참여 저하율은 비게이미피케이션 조건(37.5%)에 비해 게이미피케이션 조건(12.5%)에서 유의미하게 낮았다(McNemar's exact test, $p = .039$).
5. 행동적 특이성: 게이미피케이션의 긍정적 효과는 4개 문항의 행동 참여 하위 척도에서도 방향성과 크기 면에서 관찰되었다(평균 차이 = 0.31, $p = .067$, $BF_{10} = 0.93$). 이는 이러한 성과가 단순히 일반적인 정서적 또는 인지적 태도의 부산물이 아님을 시사한다. 다만, 이 특정 하위 척도에 대한 증거는 통계적 유의 수준에 도달하기보다는 암시적인 수준이었다.
6. 통계적 강건성: 베이지안 분석은 전체적인 패턴이 진정한 게이미피케이션 효과를 뒷받침하고 있으나, 현재의 샘플 크기에서 증거의 강도는 '일화적(anecdotal)' 수준에서 '중간(moderate)' 사이를 오가고 있음을 나타냈다. 이는 본 연구의 결과가 결정적이라기보다는 시사적임을 의미한다.

주요 기여
본 논문은 세 가지 주요 방식으로 문헌에 기여한다:

1. 방법론적 엄밀성: 가상의 혹은 성적이 부여되지 않는 과업에 의존하는 기존 연구들과 달리, 실제 학점과 연계된 실제 강의 코스 점수를 활용한 피험자 내 교차 설계를 사용하였다.
2. 참여 저하 방지: 게이미피케이션의 주요 측정 가능한 이점은 반드시 참여도를 높이는 학생의 수를 늘리는 것이 아니라, 신뢰할 만한 참여 저하를 보이는 학생의 비율을 실질적으로 줄이는 데 있음을 식별하였다.
3. 행동적 분해: 저자의 지식 범위 내에서, 본 연구는 자기 보고된 참여 측정치를 콘텐츠별로 분해하여, 게이미피케이션 효과가 단순한 일반적 만족도가 아닌 구체적인 자기 보고된 행동적 참여 수준에서 지속된다는 것을 보여준 최초의 교차 연구 중 하나이다.

의의 및 주장
저자들은 게이미피케이션이 특히 낮은 기초 참여도를 가진 학생들에게 "참여 저하에 대한 완충제" 역할을 한다고 주장한다. 본 연구는 게임 메커니즘(크로스워드, 포인트, 리더보드 등)을 LMS 플랫폼에 통합하는 것이 학생의 동기를 유지하고 학업 성취도를 향상시키는 더 몰입감 있는 학습 경험을 창출할 수 있음을 시사한다.

그러나 본 논문은 자신의 주장에 대해 겸허한 어조를 유지한다. 저자들은 작은 샘플 크기($n=32$), 자기 보고 데이터에 대한 의존성, 연구의 단기적 성격 등의 한계를 명시적으로 인정하였다. 또한, 여러 분석 접근 방식(상호작용 모델, RCI, 군집 분석)을 통해 증거가 수렴하고 있음에도 불구하고, 샘플 크기와 독립적 재현의 필요성 때문에 이러한 결과는 "결정적"이라기보다 "시사적"인 것으로 보는 것이 적절하다고 언급하였다. 본 연구는 게이미피케이션이 참여와 성과를 촉진하는 데 유망한 가능성을 보여주지만, 장기적인 영향, 적응형 전략, 그리고 다양한 학문 분야에 대한 적용을 조사하기 위한 후속 연구가 필요하다고 결론짓는다.