Closing the Confidence Gap: Piloting an In-House Revision Programme to Improve UKMLA Preparedness, Confidence, and Question Comprehension

기술 요약: UKMLA 준비 과정에서의 자신감 격차 해소

문제 제별
2024년 영국 의사 면허 시험(UKMLA) 적용 지식 테스트(AKT)의 도입은 임시 영국 의사 협회(GMC) 등록을 위한 새로운 국가적 고득점 기준을 설정했습니다. 각 의과대학이 최종 시험을 개별적으로 관리했던 이전 시스템과 달리, UKMLA는 모든 졸업생이 핵심 지식과 임상적 추론에 대해 표준화된 수준을 입증할 것을 요구합니다. 이러한 변화는 마지막 학년 학생들에게 상당한 과제를 안겨주는데, 이들은 수년간의 학습 내용을 특정 문제 형식(단일 최선 답안, Single Best Answer) 및 MLA 콘텐츠 맵에 맞춰 종합해야 합니다.

기관 차원의 지원 측면에서 중대한 격차가 존재합니다. AKT를 위한 공식적인 대학 주도 복습 프로그램은 제한적이며, 이로 인해 학생들은 상업용 문제 은행에 크게 의존하게 됩니다. 이러한 의존도는 상업적 자원의 비용이 학생들의 사회경제적 배경에 따라 격차를 유발할 수 있다는 점에서 형평성 문제를 제기합니다. 또한, 인출 연습(retrieval practice)이나 간격 반복(spaced repetition)과 같은 능동적 학습 전략이 효과적이라는 증거가 있음에도 불구하고, 학생들은 이러한 원칙을 인지하지 못하거나 새로운 시험 형식에 효과적으로 적용하는 가이드를 받지 못하는 경우가 많습니다.

방법론
본 연구는 영국 북서부의 한 주요 교육 병원에서 156명의 적격한 의대 마지막 학년 학생들을 대상으로 실시된 단일 센터 서비스 평가입니다. 중재 방안은 저비용으로 접근 가능한 기관 주도 복습 프로그램으로 설계되었습니다.

• 세션 1 (온라인): 최근 UKMLA AKT 파일럿 시험을 통과한 졸업생이 Microsoft Teams를 통해 진행한 40분간의 구조화된 세션입니다. 내용은 시험 구조, 문제 유형, 콘텐츠 분포 및 복습 전략을 다룹니다.
• *세션 2 (대면): 한 달 후 진행된 75분간의 인터랙티브 세션으로, 엄선된 AKT 스타일의 객관식 문제(MCQ)와 공식 연습 문제 샘플을 활용한 빠른 속도의 문제 기반 형식을 사용했습니다.

데이터 수집 및 분석:

• 도구: 세션 1을 위해 사전 및 사후 설문지를 실시하였으며, 세션 2를 위해 사후 설문지를 실시하였습니다. 도구는 본 평가를 위해 특별히 개발되었으며 5점 리커트 척도(1 = '전혀 동의하지 않음'부터 5 = '매우 동의함'까지)를 사용했습니다.
• 측정 항목: 세션 1에서는 네 가지 영역을 평가했습니다: (1) 자기 보고된 준비도, (2) 시험 구조에 대한 이해도, (3) AKT 스타일 MCQ 접근에 대한 자신감, (4) 복습 자원의 적절성에 대한 자신감. 세션 2에서는 즐거움, 관련성, 상호작용성을 평가했습니다.
• 통계 분석: 세션 1의 사전 및 사후 분포는 서열 데이터에 대한 Mann-Whitney U 검정과 이분법적 "동의/매우 동의" 응답에 대한 Fisher의 exact test를 사용하여 비교되었습니다. 자유 기술 응답(free-text responses)은 기술 통계적으로 분석되었습니다.

주요 결과

• 세션 1 결과:

  • 응답률: 각각 27개(사전) 및 18개(사후)의 설문지가 작성되었습니다 (각각 17.3% 및 11.5%의 응답률).
  • 준비도: 준비되었다고 동의한 학생의 비율이 7.4%에서 33.3%로 증가했습니다 (+25.9%p; p = 0.045).
  • 시험 구조 이해도: 동의율이 29.6%에서 83.3%로 상승했습니다 (+53.7%p; p < 0.001).
  • MCQ 자신감: 동의가 33.3%에서 61.1%로 증가했습니다 (+27.8%p; p = 0.022).
  • 자원 자신감: 가장 큰 변화는 여기서 나타났습니다. 동의율이 18.5%에서 94.4%로 상승했습니다 (+75.9%p; p < 0.001). 자원에 대한 불확실성은 66.7%에서 5.6%로 급감했습니다.
  • 후속 참여 의사: 응답자의 88.9%가 후속 세션에 참여할 의사가 있다고 답했습니다.

• 세션 2 결과:

  • 참석 인원: 50명의 학생이 참석했습니다 (적격 코호트의 32.0%).
  • 피드백: 42명의 응답자 중 97.6%가 세션이 즐겁고, AKT와 관련이 있으며, 재미있고 상호작용적이었다는 점에 동의하거나 매우 동의했습니다.
  • 질적 피드백: 학생들은 인터랙티브한 형식과 즉각적인 설명을 높게 평가했습니다. 건설적인 제안으로는 포용적인 참여를 보장하기 위해 손 들기 대신 디지털 투표 도구를 사용할 것과, 학습 장애(예: 난독증)가 있는 학생들을 배려하여 진행 속도를 조절할 것을 포함했습니다.

주요 기여

1. 기관 중재 모델: 본 논문은 짧고 저비용인 기관 주도 복습 시리즈가 학생들의 자기 보고된 성과를 측정 가능한 수준으로 개선할 수 있음을 보여줍니다.
2. 자원 자신감: 본 연구는 복습 자원에 대한 불확실성이 학생 불안의 주요 원인임을 강조합니다. 근거 기반 자원을 안내하는 구조화된 프로그램은 이러한 거대한 스트레스 요인을 불균형적으로 해소할 수 있습니다.
3. 시험 형식 지식: 결과는 시험 구조에 대한 이해가 임상 지식 숙달과는 별개로, 단 한 번의 교육 세션을 통해 유의미하게 개선될 수 있는 독립적이고 변화 가능한 영역임을 시사합니다.
4. 형평성 함의: 무료의 구조화된 가이드를 제공함으로써, 기관은 값비싼 상업용 문제 은행에 대한 의존도를 낮추어 잠재적인 성과 격차를 해소할 수 있습니다.

의의 및 주장
저자들은 이 작업을 확정적인 효능 입증이라기보다 파일럿 평가로 규정합니다. 본 논문은 다음과 같이 주장합니다:

• 구조화된 최근 졸업생 주도의 중재는 학생들의 자기 보고된 준비도, 시험 구조 이해도 및 자원에 대한 자신감을 향상시킬 수 있습니다.
• 이러한 발견은 자기 보고된 변화가 실제 성과 향상(Kirkpatrick 계층의 레벨 4)으로 이어지는지 확인하기 위한 다기관 평가를 필요로 합니다.
• 이 모델은 UKMLA 전환으로 인한 정보 공백을 메우기 위해 마지막 학년 커리큘럼에 삽입될 수 있는 지속 가능한 근접 동료(near-peer) 지원 메커니즘을 제공합니다.

저자들은 작은 표본 크기, 낮은 응답률(자기 선택 편향 위험), 익명 데이터 수집으로 인한 개인 수준의 변화 추적 불가, 실제 시험 점수가 아닌 자기 보고된 자신감에 의존한다는 점 등 한계점을 명시적으로 언급했습니다. 따라서 본 논문은 이 모델이 유망하지만, 중재 노출과 실제 UKMLA AKT 성적 간의 관계를 연결하는 더 큰 규모의 연구를 통한 추가 검증이 필요하다는 점에서 신중하게 결론을 맺고 있습니다.