MetagenomicsBench: A Verifiable Benchmark for Agentic Metagenomics Analysis
Het artikel introduceert MetagenomicsBench, een verifieerbare benchmark bestaande uit 100 evaluaties over diverse metagenomische domeinen om de capaciteiten van AI-agenten bij het analyseren van real-world microbioomdata te beoordelen, waarbij wordt onthuld dat hoewel de sterkste configuraties een slagingspercentage van 60% bereiken, agenten vaak worstelen met probleeminterpretatie, statistische redenering en biologische interpretatie ondanks technische bekwaamheid.