MetagenomicsBench: A Verifiable Benchmark for Agentic Metagenomics Analysis
이 논문은 다양한 메타게놈 영역에 걸친 100개의 평가로 구성된 검증 가능한 벤치마크인 MetagenomicsBench를 소개하여 실제 마이크로바이옴 데이터를 분석하는 AI 에이전트의 능력을 평가하며, 가장 강력한 구성들이 60%의 통과율을 달성함에도 불구하고 에이전트들이 기술적 숙련도에도 불구하고 문제 해석, 통계적 추론 및 생물학적 해석에서 빈번하게 어려움을 겪는다는 점을 밝혀냈다.