Mind the Alignment Gap: A Spatial Transcriptomics Benchmark for Scientific Coding Agents
Dit artikel introduceert een interactief framework voor het benchmarken van wetenschappelijke programmeeragenten met behulp van ruimtelijke transcriptomics-uitlijningstaken, waarbij wordt onthuld dat hoewel een rijkere contextuele omgeving de exploratie van tools vergroot, dit de prestaties kan verslechteren door het induceren van fragiele workflows en onnodige transformaties, wat daarmee de noodzaak benadrukt om agent-traces naast de uiteindelijke outputs te evalueren.