MetagenomicsBench: A Verifiable Benchmark for Agentic Metagenomics Analysis
O artigo apresenta o MetagenomicsBench, um benchmark verificável composto por 100 avaliações em diversos domínios metagenômicos para avaliar as capacidades de agentes de IA na análise de dados de microbioma do mundo real, revelando que, embora as configurações mais fortes alcancem uma taxa de aprovação de 60%, os agentes frequentemente têm dificuldade com interpretação de problemas, raciocínio estatístico e interpretação biológica, apesar da proficiência técnica.