Thirty Years of Digital Libraries: What ECDL/TPDL Tells Us About the Field, and Where We Go from Here

1990년대 후반, 정보 과학계에서 디지털 도서관이라는 새로운 개념이 형성되기 시작했습니다. 당시 이것은 단순히 몇 권의 스캔된 책이 있는 웹사이트를 의미하는 것이 아니었습니다. 그것은 방대한 디지털 콘텐츠를 저장, 조직 및 전달할 수 있는 완전히 새로운 시스템을 구축하겠다는 약속이자 복잡한 공학적 과제였습니다. 연구자들은 디지털 선반을 만들고, 컴퓨터들이 서로 통신할 수 있게 하는 소프트웨어를 작성하며, 이러한 시스템이 사람들을 위해 어떻게 작동하게 할지 구슬땀을 흘리며 연구에 매진했습니다. 이후 30년 동안, 이들은 유럽에서 매년 열리는 컨퍼런스에 모여 자신들의 진척 상황을 공유했습니다. 그들은 이 모임을 '디지털 도서관을 위한 연구 및 첨단 기술 유럽 컨퍼런스(European Conference on Research and Advanced Technology for Digital Libraries)', 이후 줄여서 TPDL이라 불렀습니다. 30년 동안 이 모임은 연구자들이 무엇을 중요하게 여기는지, 누가 그 일을 하고 있는지, 그리고 실제로 무엇을 구축하고 있는지의 모든 변화를 기록하는 분야의 척도 역할을 했습니다.

파두아 대학교의 연구자인 잔마리아 실빌로(Gianmaria Silvello)가 수행한 최근 연구는 디지털 도서관이라는 개념이 어떻게 변모해 왔는지 이해하기 위해 이 컨퍼런스 시리즈의 전체 역사를 되돌아보았습니다. 실빌로는 1997년 첫 모임부터 가장 최근인 2026년 모임에 이르기까지, 30회에 걸친 컨퍼런스에서 발표된 모든 논문을 분석했습니다. 약 1,600편의 학술 논문을 파악하기 위해 연구자는 거대 언어 모델(LLM)로 알려진 강력한 컴퓨터 프로그램을 사용하여 각 기여물의 제목과 초록을 읽고 카테고리로 분류했습니다. 이 도구는 논문이 새로운 소프트웨어 시스템을 구축하는 것에 관한 것인지, 사람들이 도서관을 사용하는 방식을 연구하는 것인지, 아니면 컬렉션 내부의 데이터를 분석하는 것인지를 식별하는 데 도움을 주었습니다. 그 후 연구자는 기계가 텍스트를 올바르게 읽고 있는지 확인하기 위해 생성된 레이블의 샘로 직접 검토를 진행했습니다. 목표는 단순히 단어의 수를 세는 것이 아니라, 커뮤니티 자체가 시간이 흐름에 따라 어떻게 변화했는지를 관찰함으로써 분야의 진화를 추적하는 것이었습니다.

데이터가 들려주는 이야기는 초점의 근본적인 변화에 관한 것입니다. 초기 몇 년간인 1997년부터 2007년까지, 컨퍼런스는 시스템 구축이 지배적이었습니다. 연구자들은 디지털 도서관의 아키텍처, 즉 서로 다른 컴퓨터 시스템이 정보를 공유할 수 있게 해주는 프레임워크와 프로토콜을 만드는 데 집중했습니다. 그들은 인프라를 구축하고, 한 나라의 도서관이 다른 나라의 도서관과 통신할 수 있게 하는 메타데이터 표준을 설계하며, 사용자가 필요한 것을 찾을 수 있도록 돕는 검색 엔진을 개발했습니다. 논문들은 시스템 설계, 상호 운용성, 그리고 이러한 디지털 저장소를 기능하게 하는 데 필요한 도구들에 대한 기술적인 논의로 가득 찼습니다. 이는 도서관 자체를 어떻게 구축할 것인가라는 일차적인 질문이 핵심이었던 공학의 시대였습니다.

시간이 흐르면서 대화의 주제는 변하기 시작했습니다. 중간 단계인 2008년부터 2016년까지, 초점은 시스템의 구축에서 벗어나 이를 사용하는 사람들과 그 안에 담긴 콘텐츠로 이동하기 시작했습니다. 연구자들은 사용자가 이러한 디지털 컬렉션과 어떻게 상호작용하는지, 디지털 자료를 장기적으로 어떻게 보존할 것인지, 그리고 성장하는 데이터의 웹을 어떻게 관리할 것인지를 연구하기 시작했습니다. 첫 10년 동안 주요 연구 대상이었던 시스템은 더 이상 주요 주제가 아니게 되었으며, 도서관과 기록관에 의해 운영되는 배경 인프라가 되었습니다. 새로운 질문들은 이러한 시스템 내부에 담긴 기록들로 무엇을 할 수 있는가에 관한 것이었습니다.

가장 최근의 10년인 2017년부터 2026년까지, 이 분야는 두 번째, 그리고 훨씬 더 극적인 변모를 겪었습니다. 연구의 중심은 거의 전적으로 데이터 자체로 옮겨갔습니다. 오늘날의 논문들은 도서관을 구축하는 것에 관한 것이라기보다, 도서관이 보유한 학술 및 문화 기록을 처리하는 것에 관한 것입니다. 지배적인 주제는 이제 텍나 마이닝(text mining), 자연어 처리(natural language processing), 그리고 머신러닝(machine learning)입니다. 연구자들은 첨단 컴퓨터 모델을 사용하여 방대한 양의 역사적 문헌, 과학 논문, 문화 유산 자료를 분석하고 있습니다. 그들은 정보 조각들이 어떻게 연결되는지를 보여주는 복잡한 지도인 지식 그래프(knowledge graphs)를 구축하고 있으며, 인공지능을 사용하여 수백만 개의 기록으로부터 의미를 추출하고 있습니다. 디지털 도서관은 더 이상 구축해야 할 시스템이 아니라, 인공지능을 학습시키고 새로운 형태의 발견을 지원할 수 있는 큐레이션된 신뢰할 수 있는 데이터의 집합체로 간見됩니다.

연구 대상의 변화는 연구를 수행하는 주체의 변화와도 맞물려 있습니다. 초기에는 미국 연구자들의 비중이 높은 폭넓은 국제적 청중을 끌어들였습니다. 시간이 지나면서 커뮤니티의 지리적 범위는 축소되었습니다. 북미 저자의 비율은 꾸준히 감소한 반면, 유럽 연구자들의 존재감은 높아져 컨퍼런스를 주도하게 되었습니다. 오늘날 대다수의 참가자는 유럽 출신이며, 대표되는 국가의 수도 줄어들었습니다. 커뮤니티는 더욱 국지화되었으며, 돌아오는 저자들의 핵심 그룹은 작아졌고 한 번만 참석하는 신규 참가자의 수는 많아졌습니다. 컨퍼런스를 이끄는 연구 그룹 또한 변화하였으며, 이는 분야의 변화하는 우선순위를 반영하며 시대마다 서로 다른 팀이 주도권을 잡았습니다.

또한 이 연구는 연구자들의 마음속에서 디지털 도서관의 정의가 어떻게 진화했는지를 보여줍니다. 초기에 이 용어는 시스템 또는 디지털 객체의 집합을 의미했습니다. 시간이 흐르면서, 이는 하나의 역할, 즉 컬렉션에 대한 책임 있는 큐레이션(accountable curation)을 설명하게 되었습니다. 이제 디지털 도서관은 컬렉션이 신뢰할 수 있는지, 데이터의 출처를 알고 있는지, 그리고 사람과 기계 모두가 안전하게 사용할 수 있는지를 보장하는 엔티티(entity)로 이해됩니다. 이 새로운 정의는 단순한 검색 엔진이나 무작위적인 데이터 덤프와 진정한 디지털 도서관을 구분 짓는 데 매우 중요합니다. 이는 시간이 지나도 정보의 품질과 무결성을 유지해야 하는 기관의 책임을 강조합니다.

연구자들은 초점이 시스템에서 데이터로 이동했음에도 불구하고, 실제 도서관, 기록관, 박물관의 참여는 그 역할이 변했을 뿐 지속적으로 유지되었다는 점을 발견했습니다. 초기에는 이러한 기관들이 종종 시스템의 주요 구축자였습니다. 오늘날 이들은 연구의 파트너로서, 연구자들이 분석할 수 있는 큐레이션된 컬렉션을 제공하는 역할을 더 자주 수행합니다. 이러한 기관의 실무자들이 작성한 논문은 이제 대학 연구자들과의 협업을 빈번하게 포함하며, 컬렉션에 대한 깊은 지식과 컴퓨터 과학의 첨단 분석 도구를 결합합니다.

미래를 전망하며, 이 연구는 몇 가지 방향을 제시합니다. 인공지능이 더욱 강력해짐에 따라 고품질의 큐레이션된 컬렉션에 대한 필요성은 그 어느 때보다 커졌습니다. 이러한 컬렉션은 머신러닝 모델의 학습 데이터이자, 모델의 답변을 평가하기 위한 '그라운드 트루스(ground truth, 정답)' 역할을 합니다. 연구자들은 이 분야가 이러한 컬렉션의 품질, 구축된 지식 그래프의 신뢰성, 그리고 데이터의 장기적 보존에 집중해야 한다고 제안합니다. 또한 컨퍼런스가 디지털 인문학에 더 많은 공간을 할애하거나 데이터 관리와 같은 다른 분야와의 연결을 강화하는 등 계속해서 진화해야 한다고 조언합니다.

30년간의 ECDL/TPDL 컨퍼런스의 여정은 공학에서 지식으로 초점이 이동하며 성숙해 온 한 분야의 모습을 보여줍니다. 시스템의 구축자들은 데이터의 처리자로 바뀌었지만, 핵심 미션은 동일합니다. 그것은 바로 세상의 정보를 접근 가능하고 유용하게 만드는 것입니다. 디지털 도서관은 사라진 것이 아니라, 그 형태를 바꾼 것입니다. 시스템을 구축하는 곳에서 인간의 문화와 과학의 이야기를 처리하고, 이해하며, 미래를 위해 보존하는 곳으로 말입니다. 연구자들은 오늘날 디지털 도서관이 할 수 있는 가장 중요한 일은 자신이 보유한 것에 대해 책임을 지고, 관리하는 컬렉션이 세대를 거쳐 신뢰할 수 있고 사용 가능한 상태로 남도록 보장하는 것이라고 결론지었습니다.