Benchmarking Quantum Computers via Protocols, Comparing IBM's Heron vs IBM's Eagle

본 논문은 게이트 수준이 아닌 프로토콜 수준의 벤치마크 방법론을 적용하여 IBM 의 구형 '이글' 아키텍처와 신형 '허론' 아키텍처를 비교 분석함으로써, 허론 세대에서의 실질적인 성능 향상과 양자 우위 달성 가능성을 입증했습니다.

핵심

이 논문은 IBM 의 두 가지 양자 컴퓨터 칩, **'이글 (Eagle, 구형)'**과 **'허론 (Heron, 신형)'**을 비교한 연구 보고서입니다. 전문적인 용어 대신 일상적인 비유를 들어 쉽게 설명해 드리겠습니다.

🏁 핵심 주제: "양자 컴퓨터가 정말로 일을 잘할까?"

양자 컴퓨터는 매우 빠르고 강력하다고 하지만, 실제로는 소음과 오류가 많아 신뢰하기 어렵습니다. 연구자들은 "이 칩이 정말 양자적인 능력을 가지고 있을까?"를 확인하기 위해 **특수한 테스트 (프로토콜)**를 개발했습니다.

이 테스트는 마치 운전 면허 시험과 같습니다. 단순히 엔진을 켜는 것 (게이트 레벨) 을 보는 게 아니라, 복잡한 도로에서 실제로 차를 잘 운전할 수 있는지 (프로토콜 레벨) 확인하는 것입니다.

---

🧪 테스트 방법: "점진적인 난이도 시험"

연구진은 칩의 작은 부분 (사각형 모양의 '서브-칩') 들을 대상으로 다음과 같은 단계별 시험을 치렀습니다.

1. 아무것도 안 하기 (Do-nothing): 가장 기초적인 시험입니다. 정보를 그냥 보내고 받아보는 것입니다. (예: 편지를 우체국에 맡겨서 그대로 받아보는 것)
2. 정보 전송 (Transmit): 정보를 한쪽에서 다른 쪽으로 옮기는 시험입니다.
3. 복잡한 마술 (Teleportation, Entanglement 등): 정보를 순간 이동시키거나, 얽힌 상태를 이용해 정보를 주고받는 고급 기술들입니다.

각 단계마다 **합격 기준 (문턱)**이 있습니다. 만약 이 기준을 통과하지 못하면, 그 칩은 "양자 컴퓨터라 부르기 어렵다"고 판단합니다.

---

🐦 vs 🦅: 두 칩의 대결

1. 구형 칩: 이글 (Eagle) - '브리스번 (Brisbane)'

이 칩은 오래된 모델입니다. 연구진이 시험을 시작했을 때, 이 칩은 아주 기초적인 '아무것도 안 하기' 시험에서도 많은 부분이 실패했습니다. 마치 낡은 자동차가 출발선에서조차 시동이 잘 걸리지 않는 것과 같습니다.

• 결과: 칩의 일부 영역만 겨우 통과했고, 복잡한 마술 (얽힘 교환 등) 은 전혀 수행하지 못했습니다.
• 재미있는 사실: 연구 기간 동안 IBM 이 이 칩을 '수리 (업그레이드)'했습니다. 수리 전과 수리 후를 비교하니 성능이 조금 나아졌지만, 여전히 한계가 명확했습니다.

2. 신형 칩: 허론 (Heron) - '킹스턴 (Kingston)'

이 칩은 최신 모델입니다. 구형 칩이 고생하던 기초 시험에서도 훨씬 더 많은 부분이 합격했습니다.

• 결과: 칩의 대부분이 기초 시험을 통과했고, 심지어 **복잡한 마술 (양자 전송, 얽힘 교환 등)**도 성공적으로 수행했습니다.
• 비유: 구형 칩이 '발만 떼는' 수준이었다면, 신형 칩은 '고속도로를 달리는' 수준입니다. 특히 칩의 여러 부분을 연결해서 큰 작업을 할 때 (서브-칩 확장) 성능이 훨씬 안정적이었습니다.

---

📊 주요 발견: "작은 부분이라도 믿을 수 있는 곳이 있다"

이 연구의 가장 큰 특징은 전체 칩의 평균 점수를 보는 게 아니라, **칩 안에서 가장 잘하는 부분 (최적 서브-칩)**을 찾아낸다는 점입니다.

• 구형 (브리스번): 칩 전체를 다 봐도 믿을 만한 부분이 거의 없었습니다. 복잡한 작업을 할 수 있는 '안전한 구역'이 거의 없었습니다.
• 신형 (킹스턴): 칩 전체를 다 봐도 좋지만, 특히 **특정 구역 (11 개의 사각형 영역)**은 매우 뛰어난 성능을 보였습니다. 이 구역만 골라서 사용하면 복잡한 양자 계산을 안정적으로 할 수 있다는 뜻입니다.

🚀 결론: 왜 이 연구가 중요한가?

1. 현실적인 평가: 단순히 "게이트 오류율이 낮다"는 숫자만 보는 게 아니라, 실제 복잡한 작업을 할 수 있는지로 평가했습니다.
2. 진보 확인: IBM 의 최신 칩 (허론) 이 이전 칩 (이글) 에 비해 압도적으로 좋아졌다는 것을 증명했습니다. 특히 복잡한 양자 마술을 수행하는 능력이 크게 향상되었습니다.
3. 사용자 가이드: 앞으로 양자 컴퓨터를 쓸 사람들은 이 연구를 통해 "어떤 칩의 어떤 부분을 써야 가장 잘 작동할지"를 미리 알 수 있게 되었습니다.

한 줄 요약:

"양자 컴퓨터도 사람처럼 '실력'이 다릅니다. 이 논문은 구형 칩이 기초 체력도 부족했지만, 신형 칩은 복잡한 마술까지 잘할 수 있는 '실력 있는 선수'로 성장했음을 증명했습니다."

기술 요약

논문 요약: 프로토콜 기반 양자 컴퓨터 벤치마킹 - IBM Heron vs Eagle 비교

1. 연구 배경 및 문제 제기 (Problem)

양자 컴퓨팅 하드웨어가 급속히 발전함에 따라, 새로운 프로세서의 능력과 오류율을 객관적으로 평가하는 것은 여전히 중요한 과제입니다. 기존의 게이트 레벨 (Gate-level) 벤치마킹은 특정 게이트의 오류율만 측정할 뿐, 실제 양자 알고리즘이나 프로토콜 수행 시의 전체적인 성능을 직관적으로 보여주지 못하는 한계가 있습니다.

• 핵심 문제: 특정 양자 프로세서 (또는 칩 내의 하위 칩) 가 실제적인 양자 우위 (Quantum Advantage) 를 발휘할 수 있는지 여부를 명확하고 현실적으로 판단할 수 있는 방법론의 부재.
• 연구 목적: IBM 의 구형 아키텍처인 **Eagle-r3 (Brisbane)**과 신형 아키텍처인 **Heron-r2 (Kingston)**를 비교하여, 프로토콜 레벨에서의 성능 차이를 규명하고 하드웨어의 실제 운영 강점과 약점을 파악하는 것.

2. 방법론 (Methodology)

가. 프로토콜 기반 벤치마킹 (Protocol-based Benchmarking)
이 연구는 게이트 단위 평가가 아닌, 잘 정의된 **양자성 임계값 (Quantumness Thresholds)**을 가진 5 가지 기본 프로토콜을 수행하여 칩의 능력을 평가합니다.

1. Do-nothing: 기본 상태 유지 (Baseline).
2. Bell-state transfer: 벨 상태 전송.
3. Teleportation: 양자 전송.
4. Super-dense coding: 초밀집 부호화.
5. Entanglement swapping: 얽힘 스와핑.
   • 추가: 성능이 매우 낮은 칩을 위해 Transmit (단순 상태 전송) 프로토콜을 새로 정의하여 평가의 해상도를 높였습니다.

나. 최적 탐색 워크플로우 (Optimal Lookup Workflow)
칩의 전 영역을 무작위로 테스트하는 대신, 자원을 효율적으로 사용하면서 고성능 서브칩 (Sub-chip) 을 찾아내는 계층적 접근법을 사용합니다.

• 구조: 칩은 12 개 큐비트로 구성된 사각형 (Rectangle) 단위로 구성됨.
• 단계별 평가:
  1. c2c (Corner-to-Corner): 사각형의 대각선 경로 테스트.
  2. M-L (Maximal Lengths): 최장 경로 테스트 (단일 사각형만 적용).
  3. A-L (All Lengths): 모든 내부 경로 테스트.
• 선별 과정: 이전 단계의 임계값 (예: Do-nothing 의 경우 2/3 충실도) 을 통과한 서브칩만 다음 단계로 진행. 이를 통해 칩 전체에서 '양자성'을 입증한 최적의 서브칩 집합을 도출.

다. 프로토콜 벡터 (Protocol Vector)
각 프로토콜에서 성공한 사각형 (서브칩) 의 위치와 성능을 시각화한 지도. 이를 통해 사용자는 특정 계산 작업에 적합한 칩의 최적 영역을 직관적으로 선택할 수 있음.

3. 주요 기여 및 발견 (Key Contributions & Results)

가. 하드웨어 개선의 정량적 확인 (Brisbane vs Modified Brisbane)

• 2025 년 8 월 전후로 IBM 의 Brisbane 칩 (Eagle-r3) 에 큰 성능 개선이 발생했음을 발견.
• 구형 Brisbane: Do-nothing A-L 단계에서 18 개 사각형 중 단 2 개만 통과.
• 수정된 Brisbane: 6 개 사각형이 Do-nothing A-L 을 통과.
• 의의: 공식 발표 없이도 하드웨어의 미세 조정 (Tuning) 이나 개선이 있었음을 벤치마킹을 통해 증명.

나. Eagle (Brisbane) vs Heron (Kingston) 의 결정적 차이
두 아키텍처를 동일한 워크플로우로 비교한 결과, Heron-r2 (Kingston) 가 Eagle-r3 (Brisbane) 보다 압도적으로 우수함을 확인했습니다.

비교 항목	Eagle-r3 (Brisbane)	Heron-r2 (Kingston)
총 사각형 수	18 개	21 개
Do-nothing 성공 (단일)	6 개 (평균 충실도 0.715)	11 개 (평균 충실도 0.824)
Teleportation 성공 (단일)	4 개	11 개
Bell-state transfer 성공	1 개 (임계값 근접)	12 개
Entanglement Swapping	0 개 (c2c 단계에서 모두 실패)	10 개 (약 50% 성공)
Super-dense coding	0 개	9 개
성공한 쌍 (Pairs) 서브칩	Transmit 외 0 개	모든 프로토콜에서 다수 성공 (Teleportation 18 개 등)
최적 서브칩 크기	단일 사각형 수준 (복잡한 프로토콜 불가)	여러 사각형이 연결된 대규모 서브칩 가능

• 주요 발견:
  • Brisbane: 복잡한 프로토콜 (얽힘 스와핑, 초밀집 부호화) 에서는 전적으로 실패. 단일 사각형 이상의 확장성 (Scalability) 이 부족함.
  • Kingston: 단순 전송뿐만 아니라 얽힘 기반의 복잡한 프로토콜에서도 높은 충실도를 유지. 특히 쌍 (Pairs) 서브칩 평가에서 모든 프로토콜이 임계값을 통과하여, 실제 양자 계산을 수행할 수 있는 확장 가능한 영역을 확보함.

다. 스코어링 메트릭 (Scoring Metric)
칩 전체의 성능을 단일 수치로 요약하기 위해 제안된 점수 체계 (성공한 사각형 비율 $\times$ 평균 충실도).

• Kingston 은 모든 프로토콜에서 Brisbane 보다 높은 점수를 기록 (예: Teleportation 점수 0.416 vs 0.158).

4. 연구의 의의 및 결론 (Significance & Conclusions)

1. 실용적인 벤치마킹 방법론 제시: 게이트 오류율만으로는 예측하기 어려운 실제 프로토콜 수행 능력을 '프로토콜 벡터'를 통해 직관적으로 시각화하여, 연구자와 사용자에게 하드웨어 선택의 근거를 제공함.
2. 하드웨어 진보의 명확한 증거: IBM 의 신형 Heron 아키텍처가 구형 Eagle 아키텍처에 비해 양자성 유지 능력과 확장성에서 비약적인 발전을 이루었음을 데이터로 증명. 특히 복잡한 얽힘 기반 연산에서의 성패 차이가 두드러짐.
3. 하드웨어의 불확실성 관리: 하드웨어의 시간적 불안정성 (Temporal Instability) 과 실험 취소 등의 한계를 인정하고, 이를 고려한 데이터 수집 및 분석 전략을 제시함.
4. 향후 방향: 이 방법론은 양자 컴퓨터의 품질 보증 (QA) 도구로서, 하드웨어가 계속 발전하더라도 각 칩의 실제 능력을 검증하는 데 유용하게 활용될 수 있음.

결론적으로, 이 연구는 단순한 성능 수치 비교를 넘어, **"어떤 칩이 어떤 양자 작업을 실제로 수행할 수 있는가?"**에 대한 실질적인 답변을 제공하며, IBM 의 Heron 칩이 Eagle 칩 대비 양자 우위를 실현할 수 있는 훨씬 더 강력한 플랫폼임을 입증했습니다.