Did It Happen? Counterfactual Evaluation of LLM Agent Recovery from Ambiguous Tool Outcomes
Este artículo introduce un referente contrafactual que demuestra que, si bien los tiempos de espera ambiguos de las herramientas imponen un techo de éxito del 50% en la recuperación de agentes de LLM, la implementación de contratos de idempotencia estables permite una recuperación perfecta, mientras que depender únicamente de la información de estado produce solo una mejora parcial.