CELEBI: Design and Realization of a Reproducible Physics Analysis Framework

거대하고 이해관계가 얽힌 입자 물리학의 세계에서, 과학자들은 단순히 현미경을 통해 답을 찾는 것이 아닙니다. 대신 그들은 입자들을 서로 충돌시켜 지식으로 번역되어야 하는 혼란스러운 신호의 폭포를 만들어내는 거대한 기계들을 구축합니다. 이 번역 과정은 단 한 번의 발견의 순간이 아니라, 계산의 길고 구불구로한 여정입니다. 검출기는 가공되지 않은 데이터를 포착하며, 이 데이터는 중앙 집중식 시스템을 통해 처리되어 더 깨끗한 데이터셋을 생성합니다. 그제서야 개별 연구자들은 자신만의 작업을 시작합니다. 즉, 특정 이벤트를 선택하기 위한 코드를 작성하고, 수학적 매개변수를 조정하며, 새로운 입자가 발견되었는지 혹은 특정 이론이 성립하는지를 확인하기 위해 복잡한 통계 테스트를 실행하는 것입니다. 이 전체 과정은 일련의 결정 체인이며, 최종 결과는 소프트웨어, 설정, 그리고 데이터 입력의 특정 조합에 달려 있습니다.

과학계의 과제는 이 체인이 끊임없이 움직인다는 점입니다. 연구자들이 방법을 개선함에 따라, 그들은 코드를 변경하고, 숫자를 미세하게 조정하며, 데이터 세트를 교체합니다. 오늘 발표된 결과는 내일 변경될 수도 있는 프로그램의 버전에 의존할 수 있습니다. 만약 5년 전의 과학자가 결과를 확인하고 싶거나, 새로운 팀이 오래된 발견을 토대로 연구를 구축하고자 한다면, 그들은 어려운 퍼즐에 직면하게 됩니다. 즉, 작업이 수행되었을 당시의 정확한 상태를 어떻게 재구성할 것인가 하는 문제입니다. 단순히 최종 숫자나 소스 코드만을 저장하는 것으로는 부족합니다. 그 숫자들이 어떻게 만들어졌는지에 대한 전체 맥락을 보존해야 합니다. 이것 없이는 과학적 발견의 역사는 질문에서 답으로 가는 경로를 잃어버린, 서로 단절된 스냅샷들의 집합체가 되어버릴 것입니다.

이를 해결하기 위해 베이징 대학교의 자오밍루이(Mingrui Zhao)에 의해 '셀레비(Celebi)'라는 프레임워크가 개발되었습니다. 이 시스템은 물리 분석의 생애를 정적인 파일이 아니라, 살아 움직이고 진화하는 재료들의 집합체로 관리하도록 설계되었습니다. 연구자는 과학자들이 현재 작업을 조직하는 방식이 계산을 위한 지침과 그 계산이 생성하는 방대한 양의 데이터를 혼합하는 경우가 많다는 점을 깨달았습니다. 이는 특히 작업이 시간이 지남에 따라 변할 때, 어떤 버전의 프로그램이 어떤 결과로 이어졌는지 추적하는 것을 어렵게 만듭니다. 셀레비는 이 두 세계를 분리합니다. 가벼운 지침들(코드, 설정, 로직)은 한곳에 보관하는 반면, 무거운 생성 데이터는 다른 곳에 둡니다. 이러한 분리를 통해 지침들이 생성하는 테라바이트 단위의 데이터에 짓눌리지 않고도 명확하고 조직적인 방식으로 보존될 수 있습니다.

셀레비의 핵심은 분석이 어떻게 구축되는지에 대한 새로운 사고방식입니다. 연구자는 '구체화된 워크플로(materialized workflow)'라고 부르는 개념을 도입했습니다. 전통적인 컴퓨팅에서 워크플로는 종종 컴퓨터에 다음에 무엇을 할지 알려주는 단계들의 목록에 불과합니다. 하지만 셀레비에서 워크플로는 분석의 구성 요소를 나타내는 실제적이고 유형적인 객체들로 구축됩니다. 시스템은 일반적인 계산 레시피인 '알고리즘(algorithm)'과, 특정 데이터 세트에 특정 설정을 적용한 구체적인 적용 사례인 '태스크(task)'를 구분합니다. 비유하자면, 요리사가 수프를 만드는 마스터 레시피(알고리즘)를 가지고 있지만, 고객마다 소금의 양을 다르게 넣거나 다른 채소를 사용하여 서로 다른 배치의 수프(태스크)를 만드는 것과 같습니다. 이 시스템에서 마스터 레시피는 동일하게 유지되지만, 각 구체적인 배치는 레시피 및 사용된 특정 재료와 연결되는 고유한 태스크로 기록됩니다. 이러한 구조를 통해 동일한 코드를 복사하여 붙여넣을 필요 없이 분석의 여러 부분에서 재사용할 수 있으며, 이를 통해 오류를 줄이고 작업의 이력을 훨씬 더 명확하게 만듭니다.

인간이 이 구조를 읽고 이해하기 쉽게 만들기 위해, 연구자는 분석의 논리적 구조를 반영하여 디지털 파일들을 조직했습니다. 모든 것을 복잡하고 숨겨진 폴더 속에 숨기는 대신, 시스템은 프로젝트, 디렉토리, 알고리즘, 태스크라는 명확한 계층 구조를 사용합니다. 이러한 각 객체는 자체적인 노트와 설명을 가지고 있어, 파일 시스템을 살펴보는 누구라도 해당 코드 조각이 무엇을 하는지, 그리고 다른 작업과 어떻게 연결되는지 즉시 이해할 수 있습니다. 이러한 조직화는 분석이 자기 기술적(self-describing)인 상태를 유지하도록 보장합니다. 즉, 맥락이 파일 자체에 내장되어 있습니다. 또한, 시스템은 데이터의 출처에 따라 입력 데이터를 다르게 처리합니다. 만약 데이터가 분석의 이전 단계에서 생성된 것이라면, 시스템은 태스크 간의 연결 고리를 추적합니다. 만약 외부에서 온 데이터라면, 시스템은 해당 외부 데이터가 워크플로에 어디서 유입되었는지를 표시하는 특정 객체를 생성합니다. 이는 데이터의 출처와 상관없이 모든 정보의 기원을 파악할 수 있는 일관된 지도를 만들어냅니다.

셀레비의 가장 결정적인 혁신은 '임프레션(impressions)'이라고 불리는 메커니즘입니다. 작업 중인 분석은 항상 변하기 때문에, 연구자는 작업을 중단하지 않고도 특정 순간을 동결할 방법이 필요했습니다. 임프레션은 특정 순간의 전체 분석을 포착하는 스냅샷과 같으며, 코드, 매개변수 및 의존성의 정확한 상태를 캡처합니다. 일단 임프레션이 만들어지면, 그것은 불변(immutable)하며 변경할 수 없습니다. 만약 과학자가 나중에 코드를 수정하거나 설정을 변경하더라도, 새로운 작업 상태를 생성할 수는 있지만 기존의 임프레션은 원래 모습 그대로 남습니다. 이를 통해 특정 결과가 생성된 조건에 대한 영구적인 기록을 보유할 수 있습니다. 결과가 생성되면, 그 결과는 생성에 사용된 임프레션과 직접 연결됩니다. 즉, 몇 년이 지난 후에도 과학자는 결과가 어떤 버전의 코드와 어떤 특정 설정을 사용하여 만들어졌는지 정확히 알 수 있는데, 그 결과가 그 변하지 않는 스냅샷에 영구적으로 연결되어 있기 때문입니다.

또한 이 시스템은 분석을 보존하는 행위와 실행하는 행위를 분리합니다. 보존된 지침은 저장소(repository)에 저장되지만, 실제 계산을 수행할 때가 되면 '프로덕션 팩토리(Production Factory)'라는 별도의 시스템이 제어권을 넘겨받습니다. '유키(Yuki)'라는 미들웨어 계층이 두 시스템 사이의 가교 역할을 합니다. 보존된 상태를 실행해야 할 때, 유키는 저장된 지침을 컴퓨터가 실행할 수 있는 형식으로 변환하여 워크플로 러너(workflow runner)로 전달합니다. 이러한 설계 덕분에 분석을 저장하는 방식이 실행에 사용되는 특정 컴퓨터나 소프트웨어에 의존하지 않게 됩니다. 연구자는 실행 도구나 컴퓨팅 환경을 변경하더라도 분석 자체를 다시 작성할 필요가 없습니다. 이러한 유연성은 기술적 환경이 진화하더라도 분석이 장기적으로 보존될 수 있음을 보장합니다.

이러한 요소들을 결합함으로써, 셀레비는 물리 분석의 생애 주기를 관리하는 완전한 프레임워크를 제공합니다. 이는 계산을 위한 지침을 계산이 생성하는 방대한 데이터와 분리하여 유지하고, 지침들을 인간이 읽을 수 있는 구조로 조직하며, 특정 상태에 대한 영구적이고 변하지 않는 기록을 생성하는 방법을 제시합니다. 이 접근 방식은 현대 과학의 근본적인 문제, 즉 기초가 되는 작업이 끊임없이 변화할 때 결과를 재현하기 어려운 문제를 해결합니다. 연구자는 분석을 구조화되고 상호 연결된 객체들의 집합으로 취급하고, 임프레션을 사용하여 특정 상태를 고정함으로써, 원래의 질문으로부터 최종 답변에 이르기까지 명확하고 끊김 없는 증거의 선을 유지할 수 있음을 보여줍니다. 이 연구는 과학적 결과가 단순히 발표되는 것에 그치지 않고, 언제 어디서나 누구라도 다시 검토하고 검증할 수 있도록 완전히 보존되고 추적 가능하며 준비된 상태로 남을 수 있는 미래의 토대를 마련합니다.