💬 NLP

TabletCraft: Bridging a 4,000-Year Cultural Gap with Bidirectional Akkadian NMT and Cuneiform Rendering

TabletCraft는 사용자가 아카드어와 영어 간의 번역을 수행하고 새로운 메시지를 설형문자 점토판으로 구현할 수 있게 함으로써, 양방향 모두에서 경쟁력 있는 BLEU 점수를 달성하며 고대 메소포타미아와의 4,000년 문화적 격차를 메우는 최초의 오픈 소스 양방향 시스템입니다.

원저자: Zhaohui Wang

게시일 2026-08-05

📖 3 분 읽기☕ 가벼운 읽기

CC BY 4.0

원저자: Zhaohui Wang

원본 논문은 CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) 라이선스로 제공됩니다. ✨ 이것은 아래 논문에 대한 AI 생성 설명입니다. 저자가 작성하거나 승인한 것이 아닙니다. 기술적 정확성을 위해서는 원본 논문을 참조하세요. 전체 면책 조항 읽기

4,000년 전의 왕이 쓴 편지를 읽을 수는 있지만, 답장을 쓸 수는 없는 세상을 상상해 보십시오. 그것이 바로 인류의 가장 오래된 문자 체계인 설형문자가 처한 기묘한 현실입니다. 수 세기 동안 이 체계는 점토판에 새겨진 쐐기 모양의 흔적들을 해독할 수 있는 극소수의 전문가들에게만 허용된 채, 시간의 벽 뒤에 갇혀 있었습니다. 마치 모든 사람이 도서관에 들어와 책을 읽을 수는 있지만, 문은 안에서 잠겨 있고 아무도 새로운 열쇠를 만드는 법을 모르는 도서관과 같습니다. 이것은 단순히 단어를 번역하는 문제가 아닙니다. 이는 역사의 일방통행에 관한 문제입니다. 우리는 과거를 해독할 수는 있지만, 과거와 대화할 수는 없습니다. 이 논문은 컴퓨터 과학과 고대사의 교차점에 위치하며, '신경망 기계 번역(NMT)'—컴퓨터가 방대한 양의 텍스트에서 패턴을 찾아 언어를 학습하는 방식—이라는 과제를 다루며, 이를 수천 년 동안 죽어 있던 언어에 적용합니다. 핵심 질문은 단순히 "번역할 수 있는가?"가 아니라 "그것으로 글을 쓸 수 있는가?"입니다. 만약 우리가 쓸 수 없다면, 우리는 역사의 수동적인 관광객으로 남게 될 것이고, 만약 쓸 수 있다면 우리는 능동적인 참여자가 될 것입니다.

이러한 4,000년 된 벽을 허물고자 노력하는 새로운 오픈 소스 도구, TabletCraft가 등장했습니다. 연구진은 고대 아카드어를 현대 영어로 번역할 뿐만 아니라, 그 반대 방향으로도 작동하는 시스템을 구축했습니다. 여러분이 영어로 "The king rules the land(왕이 땅을 통치한다)"와 같은 문장을 입력하면, 컴퓨터는 이를 고대 아카드어로 번ell하고, 그 단어들을 올바른 설형문자 기호로 변환한 뒤, 최종적으로 디지털 점토판 이미지 위에 구현해 냅니다. 이는 마치 과거로 엽서를 보낼 수 있게 해주는 마법 같은 시간 여행 펜을 가진 것과 같습니다.

연구팀은 116,000쌍의 문장 쌍을 사용하여 ByT5라고 불리는 모델 기반의 강력한 컴퓨터 두뇌를 훈련시켰으며, 이를 통해 고대에서 현대로, 그리고 현대에서 고대로 가는 양방향 학습을 수행했습니다. 또한 컴퓨터가 단어를 선택할 때 그 단어를 나타내는 적절한 고대 기호를 찾을 수 있도록 14,000개 이상의 매핑을 포함한 방대한 디지털 사전을 구축했습니다. 결과는 인상적입니다. 약 3,000개의 샘플로 구성된 테스트 세트에서, 이 시스템은 아카드어에서 영어로 갈 때 49.1의 번역 점수를, 영어에서 아카드어로 갈 때 48.5의 점수를 기록했습니다. 이는 누군가가 이 정도 규모로 아카드어 번역에 대한 정량적 점수를 발표한 첫 사례입니다.

하지만 저자는 이것이 완벽한 해결책이라고 부르는 것을 매우 경계합니다. 저자는 영어에서 아카드어로 가는 방향의 번역이 실제 고대 텍스트가 아닌 "근사한(approximate)" 번역임을 명시적으로 밝히고 있습니다. 고대 아카드어에는 동일한 것을 표기하는 여러 가지 방법(예: 같은 소리에 대해 서로 다른 기호를 사용하는 것)이 있었기 때문에, 컴퓨터가 테스트 데이터에서 사용된 것과는 다르더라도 유효한 버전을 선택할 수 있기 때문입니다. 이는 이 시스템의 성능이 실제보다 낮게 측정되었을 가능성, 즉 보수적인 추정치임을 의미합니다. 또한 논문은 이 시스템이 특정 시기(신아시리아 시대)의 왕실 비문에 가장 잘 작동하며, 고대 상인들의 서투르거나 생략된 언어에는 어려움을 겪을 수 있다고 언급합니다.

TabletCraft의 목표는 역사학자를 대체하거나 사람들이 고대 문서를 위조하게 만드는 것이 아닙니다. 대신, 학생, 박물관 방문객, 그리고 호기심 많은 사람들이 이 문자를 가지고 "놀 수" 있도록 설계되었습니다. 학생은 디지털 점토판에 자신의 이름을 쓸 수 있고, 박물관 관람객은 짧은 헌사를 작성할 수 있습니다. 시스템은 기계가 생성한 모든 출력물에 "근사함(approximate)"이라는 라벨을 붙여, 아무도 이를 실제 역사적 유물으로 오해하지 않도록 합니다. 설형문자로 글을 쓰는 경험을 제공함으로써, TabletCraft는 역사를 단순히 읽는 경험에서 역사를 능동적으로 접하는 경험으로 전환합니다. 비록 그 과정이 다소 거칠지라도 말입니다. 이는 세계에서 가장 오래된 문자 체계를 침묵하는 일방향 기록물이 아닌, 살아있는 양방향 대화로 만들기 위한 첫걸음입니다.

기술 요약: TABLETCRAFT

문제 정의
약 50만 개의 설형문자 점토판이 생존해 있음에도 불구하고, 중대한 문화적 장벽이 존재한다: 현대 사용자들은 세계에서 가장 오래된 이 문자 체계를 읽거나 쓸 수 없다는 점이다. 최근의 신경 기계 번역(NMT) 시스템과 같은 기존의 자연어 처리(NLP) 도구들은 아카드어에서 영어로의 일방향 번역을 가능하게 함으로써 이 문제를 부분적으로만 해결하고 있다. 이는 현대 사용자가 고대 문화의 수동적인 소비자로 남게 되는 "시간적 비대칭성"을 초라한다. 결정적으로, 기존의 어떤 시스템도 비전문가가 새로운 콘텐츠를 설형문자로 작성하거나 영어를 아카드어로 번역하여 시각적으로 구현하는 것을 허용하지 않으며, 이는 참여를 능동적 참여가 아닌 수동적 독서에 국한시킨다.

방법론
저자는 양방향 상호작 작용을 통해 이 간극을 메우기 위해 설계된 오픈 소스 시스템인 TABLETCRAFT를 제시한다. 시스템 아키텍처는 세 가지 주요 구성 요소로 이루어진다:

양방향 번역 모델:
- 기본 아키텍처: 미세 조정된 ByT5-base 모델 (581M 파라미터).
- 학습 데이터: 모델은 58,126개의 병렬 문장에서 유도된 116,000개의 양방향 샘플로 학습되었다. 이 소스에는 Akkademia 데이터셋(50K), Deep Past Initiative의 공유 번역 과제(1.5K), 그리고 문장 정렬 확장 데이터(6K)가 포함된다.
- 학습 전략: 모델은 태스크 접두사(task prefixes)를 사용하여 양방향(아카드어→영어 및 영어→아카드어)으로 학습된다. 어휘 불일치 없이 격음(예: š, t., s.) 및 로그그램(logogram)을 처리하기 위해 바이트 수준 토큰화(Byte-level tokenization)가 채택되었다.
- 구성: 학습에는 20 에포크(epoch), 학습률 $10^{-4}$ , 배치 크기 32, 레이블 평활화(label smoothing) 0.2, 그리고 두 대의 RTX 3090 GPU를 활용한 BF16 정밀도가 사용되었다.
설형문자 부호 변환기 (Cuneiform Sign Converter):
- 이 구성 요소는 전사(transliteration) 문자열을 유니코드 설형문자 문자로 매핑하는 결정론적 룩업 테이블 역할을 한다.
- ORACC, CDLI, Akkademia에서 컴파일된 14,240개의 매핑을 포함하며, 95.3%의 토큰 커버리지를 달enc한다.
- 아시리아 학계의 관례에 따라, 변환 과정에서 결정사(determinatives)는 제거된다.
시각적 점토판 렌더러 (Visual Tablet Renderer):
- 이 모듈은 점토 배경, 가이드 라인, Noto Sans Cuneiform 글꼴을 특징으로 하며 신아시리아(Neo-Assyrian) 점토판 스타일의 SVG/PNG 출력을 생성한다.
- GPU 가속 없이 작동하며, 10밀리초 미만으로 점토판을 렌더링한다.

시스템은 CLI, Python API, Gradio 웹 데모를 갖춘 pip 설치 가능한 툴킷(cuneiscribe)으로 패키징되어 있다.

주요 기여

최초의 양방향 시스템: TABLETCRAFT는 아카드어→영어 번역과 영어→아카드어 작문, 그리고 시각적 설형문자 렌더링을 모두 지원하는 최초의 오픈 소스 시스템이다.
문화적 주체성: 영어를 설형문자로 작문할 수 있게 함으로써, 이 시스템은 사용자를 수동적 독자에서 능동적 참여자로 재정의하며, 사용자가 고대 문자로 개인적인 메시지(예: 이름, 헌사)를 생성할 수 있게 한다.
이중 사용자 설계: 시스템은 학술적 충실도와 대중적 접근성 사이의 긴장을 다룬다. 시스템은 중간 계층(전사, 부호 매핑)을 노출하며, 기계가 생성한 모든 아카드어를 "근사치(approximate)"로 명시적으로 라벨링하여, 검증을 위한 초안 글로스(gloss)가 필요한 연구자와 개인적 참여를 원하는 일반 대중 모두를 지원한다.
개방적 접근성: 이 툴킷은 다국어 확장이 가능하고 오픈 소스인 자원을 제공함으로써, 고대 메소포타미아를 포함하는 국가들(이라크, 시리아, 터키, 이란)의 연구자와 교육자들을 위한 장벽을 낮춘다.

결과
시스템은 보류된 Akkadia 검증 분할(2,812개 샘플, 주로 신아시리아 왕실 비문)을 통해 평가되었다:

아카드어→영어: 49.1 BLEU 및 **63.1 chrF++**를 달성하여, 기존의 Akkadia CNN 베이스라인(37.5 BLEU)을 능가했다.
영어→아카드어: 48.5 BLEU 및 **55.6 chrF++**를 달성했다. 이는 이 방향에 대한 첫 번째 발표된 정량적 결과이다.
- 참고 사항(Metrics): 저자는 영어→아카드어의 BLEU 점수가 보수적인 하한선이라고 언급한다. 왜냐하면 아카드어는 동일한 표면 형태에 대해 여러 철학적으로 유효한 철자(예: 로그그램 방식 vs 음절 방식)를 허용하므로, 다른 유효한 부호를 사용한 유창한 의역은 내용이 맞더라도 점수가 낮게 나올 수 있기 때문이다.
커버리지: 설형문자 변환기는 샘플링된 전사 문자열에 대해 95.3%의 토큰 커버리지를 달성했다.

의의 및 주장
논문은 TABLETCRAFT가 수동적인 텍스트 소비를 넘어 설형문자와의 "참여적 상호작용 모드"를 가능하게 한다고 주장한다. 시스템은 권위 있는 번역기가 아니라 "초안 작성 및 수정 보조 도구"로 설계되었음을 강조한다. 저자는 영어→아카드어 방향이 실제 고대 텍스트가 아닌 근사한 현대적 전사를 생성하므로, 출력물을 일차적인 역사적 증거로 인용해서는 안 된다고 명시적으로 밝힌다.

또한, "아카드어"를 단일한 언어로 취급할 수 없음을 강조한다(예: 신아시리아 왕실 비문과 고대 아시리아 상업 서신 간의 성능 차이). 따라서 시스템은 사용자 기대치를 관리하기 위해 신뢰도 점수와 장르 태깅을 포함한다. 논문은 결론적으로, 시스템이 4,000년의 문화적 간극을 메우는 작문 기능을 성공적으로 수행했으나, 수메르어, 설형문자 OCR, 그리고 비영어권 언어 피벗(pivot)을 지원하기 위한 향후 연구가 필요하다고 밝히고 있다.

기술 요약: TABLETCRAFT

유사한 논문