Mwando: Leveraging AI to Preserve and Teach shiKomori

모든 언어가 고유하고 살아있는 도서관인 세상을 상상해 보세요. 어떤 도서관은 수백만 권의 책, 끝없는 정보의 통로, 그리고 순식간에 어떤 페이지라도 찾아낼 수 있는 로봇을 갖춘 거대한 규모를 자랑합니다. 또 다른 도서관은 조용한 구석에 숨겨져 있어, 단 몇 권의 손으로 쓴 노트와 그 이야기를 기억하는 소수의 어르신들만이 있는 아주 작은 규모입니다. 수십 년 동안 거대 기술 기업들은 이 거대한 도서관들을 이용해 "생각하는 기계"(인공지능이라 불리는)를 구축해 왔습니다. 하지만 아주 작은 도서관들은 어떻게 될까요? 만약 아무도 기계에게 그들의 이야기를 가르치지 않는다면, 그 언어들은 사라지고 그와 함께 고유한 문화도 사라질지 모릅니다. 이것이 바로 "저자원 언어(low-resource languages)"의 과제입니다. 즉, 디지털 책이 아주 적은 언어를 가르치기 위해 어떻게 초지능 로봇을 교육할 것인가 하는 문제입니다.

여러분이 곧 듣게 될 논문은 바로 이 문제를 다룹니다. 이 논문은 코모로 제도에서 사용되는 **시코모리(shiKomori)**라는 아름답고 특정한 언어에 초점을 맞추고 있습니다. 연구진은 **음완도(Mwando)**라는 디지털 비서를 만들었습니다('음완도'는 그들의 언어로 '시작'을 의미합니다). 음완도를 모든 것을 아는 단 하나의 전지전능한 로봇이 아니라, 서로 협력하는 전문 사서 팀이라고 생각하십시오. 한 사서는 사전을 알고, 다른 사서는 문법 규칙을 알며, 세 번째 사서는 오래된 속담과 이야기를 알고 있고, 네 번째 사서는 막히는 부분이 생기면 인터넷으로 달려갈 준비가 되어 있습니다. 그들은 "지식 그래프"(연결된 아이디어들의 거대한 웹과 같은 것)와 "벡터 검색"(단어가 철자가 같지 않더라도 느낌이 유사한 단어를 찾는 방법)이라는 영리한 기술을 사용하여 질문에 답합니다. 목표는 단순히 단어를 번翻译하는 것이 아니라, 프랑스와 같은 곳에 멀리 떨어져 사는 많은 코모로 사람들을 포함한 다음 세대에게 언어를 가르침으로써 문화를 보존하는 것입니다.

---

음완도의 이야기: 사라져가는 언어를 위한 디지털 사서

코모로 제도의 중심부에서, 새로운 종류의 조력자가 한 언어를 지켜내고 있습니다. 나이라 압두 모하메드(Naira Abdou Mohamed)와 그녀의 팀이 이끄는 연구진은 **시코모리(shiKomori)**를 가르치고 보존하기 위해 설계된 가상 비서인 **음완도(Mwando)**를 만들었습니다. 하지만 반전이 있습니다. 시코모리는 단 하나의 언어가 아니라, 각기 다른 섬에서 사용되는 네 가지 방언(shiNgazidja, shiMwali, shiNdzuani, shiMaore)의 가족이라는 점입니다. 컴퓨터에게 이 네 가지를 모두 이해하도록 가르치는 것은 마치 개에게 네 가지 서로 다른 인간의 언어를 동시에 말하도록 가르치는 것과 같습니다.

음완도를 만들기 위해 팀은 단순히 추측하지 않았습니다. 그들은 디지털 보물찾기를 떠났습니다. 그들은 찾을 수 있는 모든 시코모리 조각들을 모았습니다. 178개의 유용한 구절, 331개의 속담, 그리고 사전에서 추출한 수천 개의 단어들을 말이죠. 심지어 인터넷에서 오래된 문법 수업 내용까지 찾아냈습니다. 하지만 가공되지 않은 데이터는 엉망입니다. 재료 목록이 고양이 사진 옆에 뒤섞인 표로 나열된 레시피를 읽으려고 노력하는 상황을 상상해 보십시오. 팀은 이 데이터를 정리해야 했습니다. 표를 깔끔한 목록으로 바꾸고, 혼란스러운 상태를 컴퓨터가 실제로 이해할 수 있는 구조화된 "지식 베이스"로 조직화했습니다.

로봇 팀

음완도의 마법은 그것이 생각하는 방식에 있습니다. 모든 것을 하려는 하나의 거대한 뇌 대신, 이 시스템은 **멀티 에이전트 아키텍처(multi-agent architecture)**를 사용합니다. 한 명의 교사가 수학, 역사, 미술을 동시에 가르치려 하는 대신, 전문가 팀이 있는 학교를 상상해 보십시오.

1. 검색 에이전트 (관리자): 이 에이전트는 대장입니다. 질문을 받으면 누구를 불러야 할지 결정합니다. "문법 전문가가 필요한가? 사전이 필요한가? 아니면 인터넷을 확인해야 하는가?"
2. 번역/속담 에이전트 (이야기꾼): 이 에이전트는 사전과 속담을 보유하고 있습니다. 이 에이전트는 특별한 "지식 그래프"(연결된 아이디어의 거미줄이라고 생각하십시오)를 사용하여 단순히 단어가 일치하는 것이 아니라 주제와 일치하는 속담을 찾아냅니다.
3. 교사 에이전트 (튜터): 이 에이전트는 지루하지만 중요한 일들, 즉 문법 규칙, 동사 변화, 그리고 왜 문장이 그런 방식으로 구성되었는지를 설명하는 일을 처리합니다.
4. 문화 에이전트 (탐험가): 만약 팀이 답을 모른다면, 이 에이전트는 정보를 검색하기 위해 라이브 웹으로 나가 안전망 역할을 수행합니다.

그들은 다섯 명의 사람으로부터 받은 500개의 다양한 질문으로 이 팀을 테스트했습니다. 결과는 유망했지만 완벽하지는 않았습니다. 질문이 단순한 어휘(예: "'병원'을 뜻하는 단어는 무엇인가요?")에 관한 것이었을 때, 음완도는 **82%**의 확률로 정답을 맞히며 스타가 되었습니다. 문법 규칙을 설명하는 데에도 꽤 능숙했습니다. 하지만 질문이 까다로워졌을 때(예: 깊은 문화적 속담의 의미나 복잡한 문화적 사실을 물었을 때), 점수는 떨어졌습니다. 시스템은 때때로 답변이 다소 피상적이거나, 인간 어르신이 포착할 법한 미묘한 문화적 뉘앙스를 놓치기도 했습니다.

한계와 미래

저자들은 음완도가 아직 할 수 없는 것에 대해 매우 솔직합니다. 그들은 shiNdzuani나 shiMwali와 같은 일부 방언의 경우, 도서관의 규모가 여전히 너무 작다는 점을 인정합니다. 시스템은 때때로 속담의 깊은 정서적 맥락을 다루는 데 어려움을 겪으며, 인터넷에 의존해야 할 경우 약간 틀린 답을 가져올 수도 있습니다. 또한 테스트 그룹이 작았기(단 5명) 때문에, 실제 학생들에게 얼마나 잘 작동하는지 진정으로 알기 위해서는 더 많은 목소리가 필요하다고 언급했습니다.

이러한 난관에도 불구하고, 음완도는 거대한 "시작"을 의미합니다. 이는 디지털 책이 매우 적은 언어라 할지라도 우리가 그것을 가르칠 도구를 만들 수 있다는 것을 증proof합니다. 팀은 더 많은 단어를 수집하고, 속담의 의미를 심화하기 위해 문화 전문가들의 도움을 받으며, 궁극적으로 음-완도를 실제 교실에 배치할 계획입니다. 그들의 희망은 무엇일까요? 이 작은 디지털 비서가 코모로 디아스포라(해외 거주 코모로인)가 자신들의 뿌리와 다시 연결되도록 돕고, 섬의 이야기들이 결코 잊히지 않도록 보장하는 것입니다. 이것은 모든 것을 해결하는 마법 지팡이는 아니지만, AI 시대에 아름다운 언어를 지켜내기 위한 매우 강력한 첫걸음입니다.