Engagement Intensity as a Learner-Modeling Signal for Adaptive AI Ethics Instruction

당신이 요리사로서 예비 셰프들을 위한 특별한 요리 수업을 준비하고 있다고 상상해 보세요. 당신은 어떤 학생들은 칼을 한 번도 잡아본 적이 없고, 어떤 이들은 수년간 요리를 해왔다는 사실을 알고 있습니다. 그들을 효과적으로 가르치기 위해서, 당신은 그들이 어디에서 시작하는지를 알아야 합니다.

이 논문은 학생들에게 AI 윤리를 가르치기 전에, "AI에 대한 경험이 얼마나 있습니까?"라고 묻는 가장 좋은 방법이 무엇인지 알아내는 것에 관한 것입니다. 연구진은 **어떤 질문이 학생의 출발점에 대한 가장 정확한 그림을 제공하는가?**를 알고 싶어 했습니다.

그들은 경험에 대해 세 가지 방식으로 질문하는 것을 테스트했습니다:

1. "이력서" 질문: "전에 AI 관련 수업이나 워크숍을 들은 적이 있습니까?"
2. "자신감" 질문: "AI에 대해 얼마나 익숙하다고 느낍니까? (1~5점 척도)"
3. "행동" 질문: "실제로 AI 도구를 얼마나 자주 사용합니까?"

연구 결과는 다음과 같았습니다 (이해를 돕기 위해 간단한 비유를 사용합니다):

1. "이력서"는 나쁜 지도였습니다

연구진은 학생들에게 AI 관련 강의나 워크숍에 참석한 적이 있는지 물었습니다. 그들은 이것이 강력한 신호가 될 것이라 예상했습니다.

• 결과: 이는 여행객에게 "파리에 가본 적이 있나요?"라고 묻고, 그가 "네"라고 대답하면 파리 거리에서 길을 찾을 줄 안다고 가정하는 것과 같았습니다. 단순히 '티켓'(수업 수강)을 가졌다는 사실은 학생들이 실제로 AI에 대해 어떻게 느끼는지, 혹은 어떻게 사용할 계획인지에 대해 교사들에게 별다른 정보를 주지 못했습니다. 데이터에 따르면, 수업을 들은 적이 있다는 사실과 학생들의 현재 AI에 대한 견해 사이에는 뚜로 명확한 연결 고리가 없었습니다.

2. "행동" 질문이 최고의 나침반이었습니다

연구진은 학생들이 AI를 얼마나 자주 사용하는지(전혀 사용하지 않음부터 매일 사용함까지)를 살펴보았습니다.

• 결과: 이것이 가장 강력한 신호였습니다. 이는 운전자에게 "올해 몇 마일을 주행했습니까?"라고 묻는 것과 같았습니다. 그 답변은 그들의 운전 습관과 자신감을 완벽하게 예측했습니다.
  • AI를 매일 사용하는 학생들은 전혀 사용하지 않는 학생들과 매우 다른 견해를 보였습니다.
  • 구체적으로, 헤비 유저(heavy users)들은 일반적인 사실에 대해 AI를 더 신뢰했고, 가짜 정보를 식별할 수 있다는 자신감이 더 높았으며, AI가 자신의 비판적 사고 능력을 망칠 것이라는 걱정도 덜 했습니다.
  • AI를 "가끔" 사용하는 학생들조차도 전혀 사용하지 않는 학생들에 비해 확연한 자신감의 상승을 보여주었습니다.

3. "자신감" 체크는 좋은 제2의 의견이었습니다

"얼마나 익숙하다고 느낍니까?"라는 질문은 도움이 되었지만, "얼마나 자주 사용하는가?"라는 질문만큼 완벽하지는 않았습니다.

• 결과: 이 질문은 가짜 뉴스를 식별하거나 복잡한 작업에 AI를 신뢰하는 것과 같은 일부 항목에서는 잘 작동했지만, 다른 부분에서는 다소 모호했습니다. 이는 승객이 "길을 아는 것 같아요"라고 말하는 것과 같습니다. 그것이 대개 사실이긴 하지만, 운전자의 실제 주행 거리(사용 빈도)가 훨씬 더 일관된 이야기를 들려주는 것과 같습니다.

"임계값"의 놀라움

한 가지 흥미로운 발견은, 변화가 경사로처럼 점진적으로 일어나는 것이 아니라 전등 스위치처럼 작동했다는 점입니다.

• 만약 당신이 AI를 한 번도 사용해 본 적이 없다면, 당신의 견해는 한 방향을 향합니다.
• 하지만 당신이 AI를 조금이라도 사용하기 시작하는 순간, 당신의 견해는 크게 변화합니다.
• 다만, 특정 공포(예: "AI가 나를 게으르게 만들까?")에 대해서는 매일 사용하는 헤비 유저들 사이에서만 변화가 나타났습니다.

이것이 왜 중요한가요?

연구진은 만약 당신이 AI 윤리를 가르치는 수업을 설계한다면, 단순히 학생의 성적표를 보고 수업 수강 여부를 확인하지 말고, 대신 아주 간단한 질문을 던지라고 제안합니다. "AI를 얼마나 자주 사용합니까?"

• 만약 "전혀 사용하지 않는다"라고 답한다면: 그들에게는 AI가 무엇인지, 그리고 왜 중요한지에 대한 기초적인 입문 교육이 필요할 것입니다.
• 만 만약 "매일 사용한다"라고 답한다면: 그들은 이미 기초를 알고 있습니다. 그들에게는 AI를 과도하게 신뢰하는 것의 위험성이나 AI가 실패하는 지점을 포착하는 법에 초점을 맞춘 다른 종류의 수업이 필요할 수 있습니다. 왜냐하면 그들은 마땅히 가져야 할 위험 요소들에 대해 덜 걱정하는 경향이 있기 때문입니다.

핵심 요약

요컨대, 당신이 무엇을 하는가(도구 사용)는 무엇을 공부했는가(수업 수강)나 얼마나 자신감을 느끼는가보다 당신의 생각과 감정을 예측하는 데 훨씬 더 좋은 지표입니다. 학생들의 수업을 맞춤형으로 구성하려는 교사들에게, 실제 사용 습관에 대해 묻는 것이 수업 전 학생들을 분류하는 가장 간단하고 효과적인 방법입니다.

참고: 이 논문은 설문 조사라는 시점의 기록(snapshot in time)이며, 이러한 답변에 따라 교수 스타일을 바꾸는 것이 반드시 학생들의 학습을 개선할 것이라는 점을 증명하는 것은 아닙니다. 이는 단지 현재 학생들을 이해하는 데 있어 어떤 질문이 가장 좋은지를 말해줄 뿐입니다.