Large-Scale Analysis of Discussions by CS Educators Across the Stack Exchange Network

인터넷을 거대한, 북적이는 도서관들의 도시라고 상상해 보세요. 이 도시에는 모든 것을 다루는 하나의 거대한 도서관만 있는 것이 아니라, 각각 하나의 취미나 직업에 전념하는 수천 개의 전문화된 방들이 있습니다. 어떤 방은 자동차 수리를 위한 곳이고, 다른 방은 빵 굽기를 위한 곳이며, 매우 큰 방 하나는 컴퓨터 코드를 작성하기 위한 곳입니다. 이 도시의 이름은 스택 익스체인지(Stack Exchange)입니다. 이 도시 안에는 "CS 교육자(CS Educators)"라고 알려진 특정 집단의 사람들이 있습니다. 이들은 컴퓨터 과학을 가르치는 교사와 교수들입니다. 이들은 단순히 자신들의 교실에만 머물러 있는 것이 아니라, 찾아갈 수 있는 모든 도서관을 돌아다니며 질문을 던지고, 비밀을 공유하며, 아이디어에 대해 토론합니다.

이 교사들이 무엇을 생각하고 있는지 이해하기 위해, 연구자들은 "토픽 모델링(topic modeling)"이라는 도구를 사용합니다. 이것은 마치 수백만 권의 책을 몇 초 만에 읽고 가장 자주 사용되는 단어들을 기준으로 책들을 분류할 수 있는 매우 똑똑한 사서와 같습니다. 만약 어떤 더미에 "루프(loop)", "변수(variable)", "버그(bug)"와 같은 단어가 많다면, 사서는 그것이 프로그래밍에 관한 것임을 알게 됩니다. 만약 또 다른 더미에 "역사", "법", "수학"과 같은 단어가 있다면, 그것은 전혀 다른 주제에 관한 것임을 알게 됩니다. 이 논문은 우리가 이 슈퍼 사서에게 스택 익스체인지라는 도시 전체를 분류하게 하되, 오직 컴퓨터 과학 교사들이 남긴 노트와 질문만을 살펴보게 했을 때 어떤 일이 일어나는지에 관한 것입니다. 이것이 왜 중요할까요? 왜냐하면 교사들이 무엇에 대해 이야기하는지를 이해하는 것은 그들이 무엇을 걱정하고 있는지, 무엇에 열광하고 있는지, 그리고 다음 세대의 기술 마법사들을 가르치는 방식을 어떻게 개선하려고 노력하고 있는지를 이해하는 데 도움이 되기 때문입니다.

---

위대한 디지털 보물찾기

이 연구에서 트렌트 대학교(Trent University)의 연구원 세 명은 거대한 디지털 보물찾기를 떠났습니다. 그들은 단순히 "컴퓨터 과학 교육자" 방만을 들여다본 것이 아니라, 스택 익스체인지라는 도시 전체를 스캔했습니다. 그들은 무려 79,854,463개의 포스트라는 엄청난 양의 데이터를 수집했습니다. 이는 7,900만 개 이상의 메시지입니다! 이 데이터의 산은 32,187,805개의 질문과 47,666,658개의 답변을 포함하고 있었습니다. 하지만 그들은 도시의 모든 사람으로부터 온 모든 메시지를 읽지는 않았습니다. 그들은 오직 CS 교육자 커뮤니티의 일원인 12,949명의 사용자가 작성한 포스트만을 찾아내기 위해 특별한 필터를 사용했습니다.

노이즈를 걸러내고 질문과 (작성자가 최선의 해결책으로 표시한) "채택된 답변"에만 집중한 결과, 그들은 748,084개의 항목이라는 관리 가능한 수준이지만 여전히 거대한 컬렉션을 얻었습니다. 이 텍스트의 바다를 이해하기 위해, 그들은 잠재 디리클레 할당(Latent Dirichlet Allocation, LDA)이라는 컴퓨터 알고 알고리즘을 사용했습니다. 이 알고리즘을 유사한 대화들을 함께 묶어주는 마법의 분류 기계라고 상상해 보세요. 연구자들은 기계에게 패턴을 찾으라고 지시했고, 몇 번의 시행착오 끝에 55개의 뚜렷한 토픽이 혼돈을 정리하는 데 가장 적합한 방법임을 발견했습니다.

두 개의 큰 이웃: IT와 비(Non)-IT

기계가 포스트를 분류하자, 연구자들은 대화가 IT(정보 기술)와 비-IT(Non-IT)라는 두 개의 주요 이웃으로 나뉜다는 것을 깨달았습니다.

IT 이웃 (대화의 64.88%)
예상대로, 컴퓨터 과학 교사들은 기술 지구에서 대부분의 시간을 보냈습니다. 이 이웃은 전체 대화의 거의 **65%**를 차지했습니다. 이 지구 안에서 가장 큰 블록은 프로그래밍 및 소프트웨어 개발이었으며, 이는 전체 대화의 약 **23%**를 차지했습니다. 이곳에서 교사들은 "웹 개발"에서부터 "게임 개발", "테스트 및 디버깅"에 이르기까지 다양한 주제로 대화를 나누었습니다.

IT 이웃 내의 다른 인기 있는 장소들은 다음과 같습니다:

• 컴퓨터 시스템 (11.96%): 컴퓨터가 어떻게 작동하는지, 속도 및 네트워크에 대해 이야기합니다.
• 소프트웨어 개발 도구 (11.7%): 코드 에디터나 버전 관리와 같이 그들이 사용하는 도구에 대해 논의합니다.
• 컴퓨터 과학 (10.2%): 데이터 구조와 알고리즘 같은 개념에 대한 심도 있는 탐구입니다.
• **데이터 과학 (4.92%)**과 하드웨어 (3.0%) 또한 존재했지만 규모는 더 작았습니다.

비-IT 이웃 (대화의 35.12%)
여기서 흥부터로운 점이 나타납니다. 기술 교사임에도 불구하고, 그들의 대화 중 35% 이상이 기술 지구 밖에서 일어났습니다. 그들은 단지 코드에 대해서만 이야기하는 것이 아니라, 삶, 수학, 그리고 사회에 대해 이야기하고 있었습니다.

• 수학 (8.22%): 이것이 비-기술 세계에서 가장 큰 별이었습니다. 교사들은 "선형 대수학", "확률과 통계" 및 기타 수학적 개념을 논의했습니다.
• 라이프 스타일 (5.39%): 그들은 금융, 여행, 주택 개조 등에 대해 대화했습니다.
• 인문학 (5.20%): 역사, 문명, 국제 관계에 관한 토론입니다.
• 교육 및 연구 (4.83%): 당연하게도, 그들은 교수법, 논문 작성, 경력 개발에 대해 이야기했습니다.
• 더 작은 그룹으로는 엔터테인먼트 (3.98%), 물리학 (3.63%), 일반 상식 (2.1%), 그리고 법, 윤리 및 관습 (1.8%) 등이 있었습니다.

대화가 시간에 따라 어떻게 변했는가

연구자들은 단순히 무엇이 말해지고 있는지만 본 것이 아니라, 2008년 3월부터 2024년 5월까지 대화의 흐름을 추적하며 언제 말해졌는지를 살펴보았습니다.

그들은 IT 카테고리가 처음부터 일관되게 방 안에서 가장 큰 목소리를 내왔다는 것을 발견했습니다. 새로운 기술이나 도구가 매우 인기를 끌었을 것으로 보이는 2014년과 2017년 전후로 활동의 큰 급증이 있었습니다. 기술 세계 내에서 "프로그래밍 및 소프트웨어 개발"은 항상 가장 활발한 주제였으며, 꾸준한 성장과 동일한 큰 정점들을 보여주었습니다.

하지만 비-IT 카테고리는 다른 이야기를 들려주었습니다. 처음에는 규모가 작았지만, 2013년과 2018년 사이에 꾸준한 성장을 보였습니다. 연구자들은 이 기간 동안 교사들이 순수 코딩 이외의 주제에 점점 더 많은 관심을 갖게 되었다고 제안합니다. 수학은 비-기술 주제 중 내내 가장 인기 있는 주제였지만, 인문학과 교육 및 연구에 대한 논의도 눈에 띄는 증가를 보였습니다. 2014년 무렵부터 비-기술 주제들이 상대적인 인기를 얻기 시작했는데, 이는 기술이 여전히 왕좌를 지키고 있음에도 불구하고, 교사들이 기술이 세상, 사회, 그리고 교실과 어떻게 어우러지는지에 대한 더 넓은 관점을 점점 더 탐구하고 있음을 시사합니다.

이것이 의미하는 바 (그리고 의미하지 않는 바)

저자들은 자신들의 발견이 이러한 추세를 시사한다고 조심스럽게 말하며, 이것이 세상의 모든 컴퓨터 과학 교사들을 위해 증명하는 것은 아니라고 밝힙-니다. 이 연구는 스택 익스체인지를 사용하는 특정 집단을 대상으로 하며, 그 집단이 크기는 하지만(거의 13,000명), 모든 사람을 대표하지는 않을 수 있습니다. 또한, 데이터가 2024년 5월에서 끝나기 때문에, 2025년이나 그 이후에 무슨 일이 일어날지는 알 수 없습니다.

그들은 또한 이러한 주제들을 수동으로 분류하는 것(샘플을 읽고 라벨을 붙이는 것)이 인간의 편향을 유발할 수 있다고 인정하지만, 두 사람이 작업을 확인하게 함으로써 이를 최소화하려고 노력했습니다. 이러한 한계에도 불구하고, 이 연구는 명확하고 데이터에 기반한 그림을 제공합니다: CS 교육자들은 프로그래밍의 기술적인 세계에 깊이 관여하고 있지만, 동시에 수학적, 교육적, 그리고 인간적인 측면을 적극적으로 탐구하고 있습니다. 이는 이 교사들을 지원하기 위해서 우리가 단지 최신 코딩 언어에만 집중하는 것이 아니라, 수학, 교수 전략, 그리고 교육의 더 넓은 맥락을 위한 자원도 함께 제공해야 함을 시사합니다.