The Reliability Gap: Repeated-Trial Consistency and the Deployable Autonomy Horizon of Frontier AI Agents
이 논문은 최첨단 AI 에이전트의 성능 데이터를 분석하여, 실패가 무작위적이기보다 특정 작업 내에서 강하게 상관되어 있기 때문에 에이전트가 일관되게 완료할 수 있는 작업 지속 시간이 평균 역량 범위보다 약 2.4배 짧다는 유의미한 '신뢰성 격차'를 밝혀내며, 이는 안전한 배포를 위해 평가 지표를 평균 성공률에서 신뢰성 조정 범위로 전환해야 할 필요성을 시사한다.