Emerging Personas and Tools for Hybrid Quantum-HPC Systems

컴퓨팅의 세계가 조용하지만 심오한 교차로에 서 있습니다. 한쪽에는 기후 패턴을 모델링하고, 새로운 재료를 시뮬레이션하며, 복잡한 방정식을 해결하는 데 오랫동안 기여해 온 거대한 슈퍼컴퓨터인 고성능 컴퓨팅의 익숙하고 강력한 기계들이 자리 잡고 있습니다. 다른 한쪽에는 아원자 세계의 기이한 법칙을 사용하여 고전적 기계로는 처리할 수 없는 방식으로 정보를 처리하는 양자 컴퓨팅이라는 신흥 분야가 있습니다. 수년 동안 이 두 세계는 서로 다른 차선에서 작동해 왔습니다. 하지만 양자 기계가 작은 실험 수준에서 수십 또는 수백 개의 작은 정보 단위(unit)를 가진 프로세서로 성장함에 따라, 새로운 현실이 형성되었습니다. 과학자와 엔지니어들은 이제 이 두 기술을 하나로 엮어, 양자 프로세서가 고전적 슈퍼컴퓨터와 손을 맞잡고 어느 한쪽도 단독으로는 해결할 수 없는 문제들을 해결하는 하이브리드 시스템을 만들고 있습니다. 흔히 '양자 중심 슈퍼컴퓨팅(quantum-centric supercomputing)'이라 불리는 이 융합은 더 나은 배터리를 설계하는 것부터 자연의 근본적인 힘을 이해하는 것에 이르기까지 모든 것을 위한 해결책을 열어줄 것을 약속합니다. 그러나 이러한 시스템이 전 세계 주요 연구 센터에 도입됨에 따라 새로운 과제가 등장했습니다. 바로 이를 구축하고, 운영하며, 사용하는 사람들이 매우 다른 배경을 가지고 있으며, 종종 서로 다른 기술적 언어를 사용한다는 점입니다.

IBM과 오크리지 국립연구소(Oak Ridge National Laboratory) 연구진의 최근 논문은 참여하는 사람들의 구체적인 역할을 규명함으로써 이 성장하는 생태계에 명확성을 부여하고자 합니다. 저자들은 이 시스템을 다루는 모든 사람을 하나의 유형인 '양자 사용자'로 취급하는 대신, 각기 다른 목표, 도구, 데이터 요구 사항을 가진 6개의 뚜렷한 그룹, 즉 '페르소나(persona)'를 식별했습니다. 이 연구는 이러한 하이브리드 시스템이 성숙해짐에 따라, 가장 중요한 작업이 양자 세계와 고전적 세계가 만나는 경계 지점에서 일어나고 있음을 강조합니다. 이 복잡한 인터페이스를 관리하기 위해 세 가지 새로운 역할이 등장했습니다: 전등을 켜두는 역할을 하는 운영자(operator), 기술 간의 가교를 구축하는 시스템 엔지니어(system engineer), 그리고 그들이 함께 작동하게 만드는 코드를 작성하는 소프트웨어 개발자(software developer)입니다. 이러한 역할을 정의함으로써, 연구진은 다양한 팀이 이 시스템에서 효과적으로 정보를 공유하고 모두의 요구에 진정으로 부합하는 도구를 만들 수 있도록 하는 공통 언어를 만들고자 합니다.

논문은 하드웨어가 점점 더 유능해지고 있는 반면, 인간적인 요소는 더욱 복잡해지고 있다는 점을 인정하며 시작됩니다. 양자 컴퓨팅의 초기에는 한 명의 물리학자가 기계의 보정(calibration)부터 실험 실행까지 모든 것을 처리했을 수도 있습니다. 이제 시스템이 거대한 데이터 센터에 통합됨에 따라, 작업은 전문화된 트랙으로 분리되었습니다. 저자들은 이 지형을 구성하는 6가지 핵심 페르소나를 설명합니다. 첫 번째는 양자 알고리즘의 근본적인 빌딩 블록을 설계하는 설계자인 '양자 커널 및 라이브러리 개발자(quantum kernel and library developers)'입니다. 이들은 불완전한 하드웨어에서 회로가 효율적으로 실행되도록 하는 데 집중하며, 여전히 오류가 발생하기 쉬운 기계로부터 최대한 정확한 결과를 얻어내기 위해 끊임없이 노력합니다. 이들은 오류가 발생하는 즉시 이를 수정하는 방법을 고민하며, 기반이 되는 물리학이 노이즈가 심하더라도 양자 계산이 신뢰성을 유지할 수 있도록 보장합니다.

이들과 함께 일하는 이들은 화학이나 머신러닝과 같은 분야의 전문가들인 '도메인 과학자(domain scientists)'로, 이들은 실세계의 문제를 해결하기 위해 이 기계들을 사용하고자 합니다. 이 사용자들은 양자 회로가 어떻게 구축되는지에 대한 복잡한 세부 사항에는 관심이 없으며, 오직 정답에만 관심이 있습니다. 이들은 양자 컴퓨터를 자신의 특정 연구를 가속화하기 위한 강력한 도구로 보며, 결과 도출을 더 빠르고 저렴하게 하기 위해 양자 단계와 고전적 단계를 혼합하는 방법을 찾습니다. 이들의 주된 관심사는 특정 유형의 양자 하드웨어가 무엇인지와 관계없이, 하이브립드 시스템이 합리적인 시간과 예산 내에 자신의 과학적 질문에 대한 해답을 제공할 수 있는지 여부입니다.

그러나 논문은 가장 중요한 변화가 이 두 그룹 사이에 위치한 세 가지 새로운 역할에서 일어나고 있다고 주장합니다. 'QCSC 운영자(QCSC operator)'는 전체 시스템의 일상적인 건강 상태를 책임지는 사람입니다. 이들은 스케줄링을 관리하여, 고가의 양자 자원이 고전 컴퓨터가 기다리는 동안 유휴 상태로 방치되지 않도록 하며, 그 반대의 경우도 마찬가지입니다. 또한 이들은 보안을 처리하여 적절한 사람들이 적절한 기계에 접근할 수 있도록 하고, 양자 프로세서의 결함부터 네트워크 글리치에 이르기까지 시스템의 이상 징착을 모니터링해야 합니다. 이들의 직무는 과학자와 개발자들이 자신의 업무에 집중할 수 있도록 복잡한 기계가 원활하게 돌아가도록 유지하는 것입니다.

다음으로 'QCSC 시스템 엔지니어(QCSC system engineer)'가 있는데, 이들은 양자 세계와 고전적 세계 사이의 실제 연결을 구축하는 건설자입니다. 이 역할은 양자 프로세서가 슈퍼컴퓨터의 표준적이고 관리 가능한 부분처럼 보이고 작동하도록 하드웨어와 소프트웨어 스택을 공동 설계하는 것을 포함합니다 own. 이들은 매번 소프트웨어를 다시 작성하지 않고도 다양한 유형의 양자 기계를 사용할 수 있게 하는 인터페이스를 만들기 위해 노력합니다. 이들의 목표는 통합을 매끄럽게 만들어, 나머지 시스템이 양자 하드웨어를 그래픽 카드나 저장 장치와 같은 또 다른 리소스로 취급할 수 있도록 복잡성을 숨기는 것입니다.

이 삼인방을 완성하는 것은 하이브리드 워크플로우를 조율하는 프로그램을 작성하는 고전 컴퓨팅 전문가인 'QCSC HPC 소프트웨어 개발자(QCSC HPC software developer)'입니다. 이 개발자들은 시스템이 언제 고전적 처리에서 양자 실행으로 전환하고 다시 돌아올지를 알려주는 스크립트를 설계합니다. 이들은 데이터가 두 유형의 프로세서 사이를 이동하는 데 걸리는 시간을 최소 최소화하는 데 집중하며, 정보가 이동하기를 기다리느라 시스템이 시간을 낭비하지 않도록 합니다. 이들은 도메인 과학자들이 양자 하드웨어의 깊은 기술적 세부 사항을 이해할 필요 없이 복잡한 실험을 수행할 수 있게 하는 도구를 만듭니다.

마지막으로 식별된 페르소나는 전체 시스템의 피드백 루프 역할을 하는 '양자 물리학자(quantum physicist)'입니다. 이들은 하드웨어를 직접 만들지는 않지만, 기계가 왜 제대로 성능을 내지 못하는지 진단하는 사람들입니다. 이들은 특수 도구를 사용하여 양자 프로세서를 조사하고, 간섭이나 신호 손실과 같은 오류의 구체적인 물리적 원인을 찾아냅니다. 바쁜 데이터 센터의 스트레스 속에서 기계가 어떻게 행동하는지 이해함으로써, 이들은 설정을 조정하여 성능을 개선하고, 양자 프로세서가 다양한 사용자에 의해 사용되더라도 신뢰성을 유지할 수 있도록 합니다.

이 논문의 중요한 발견은 이 여섯 그룹 각각이 자신의 직무를 수행하기 위해 서로 다른 종류의 정보가 필요하다는 점입니다. 연구진은 시설의 온도와 전력 사용량부터 양자 프로세서의 상세한 오류율에 이르기까지, 각 페르소나가 의존하는 구체적인 데이터 범주를 매핑했습니다. 예를 들어, 운영자는 스케줄링 결정을 내리기 위해 시스템 상태와 자원 사용량에 대한 광범적인 뷰를 볼 필요가 있는 반면, 양자 물리학자는 기계를 튜닝하기 위해 펄스 시퀀스와 오류 시그니처에 대한 세밀한 데이터를 필요로 합니다. 한편, 도메인 과학자는 주로 최종 결과와 그 결과를 얻는 데 걸린 시간에 관심을 가집니다. 논문은 이 데이터를 표현하고 공유하는 일관된 방법이 없다면, 전체 시스템이 효율적으로 작동하는 데 어려움을 겪을 것이라고 제안합니다. 만약 운영자가 사용하는 도구가 개발자가 사용하는 도구와 대화할 수 없거나, 물리학자가 수집한 데이터가 과학자에게 쉽게 이해될 수 없다면, 이러한 하이브리드 시스템의 잠재력은 갇혀 있게 될 것입니다.

저자들은 이러한 시스템이 성장함에 따라 운영자, 시스템 엔지니어, 소프트웨어 개발자의 역할이 점점 더 중요해질 것이라고 강조합니다. 단일 데이터 센터가 각기 다른 특성과 요구 사항을 가진 다양한 유형의 양자 기계를 호스팅할 수 있으며, 이는 막대한 관리 부담을 초래합니다. 과학적 결과의 정확성은 고전적 부분과 양자 부분이 얼마나 잘 조정되느냐에 크게 달려 있으며, 워크플로우를 서로 다른 기계 간에 이동시키는 능력은 이 분야가 규모를 키우는 데 필수적일 것입니다. 누가 무엇을 하는지, 그리고 그들이 어떤 데이터를 필요로 하는지를 명확히 정의함으로써, 이 논문은 더 나로은 도구와 표준을 구축하기 위한 토대를 제공합니다. 이는 커뮤니티를 향한 촉구입니다. 즉, 이러한 시스템을 고립된 부분들의 집합으로 취급하는 것을 멈추고, 사람, 도구, 데이터가 조화를 이루어 작동해야 하는 하나의 통합된 생태계로 보기 시작하라는 것입니다. 앞으로의 길은 단순히 더 나은 양자 컴퓨터를 만드는 것뿐만 아니라, 다음 세대의 과학적 발견을 이끌 다양한 팀이 이를 효과적으로 사용할 수 있게 하는 인간적, 기술적 인프라를 구축하는 것에 있습니다.