ACE-Bench: Agent Configurable Evaluation with Scalable Horizons and Controllable Difficulty under Lightweight Environments
ACE-Bench एक हल्का, पुनरुत्पादनीय एजेंट मूल्यांकन बेंचमार्क है जो कार्य क्षितिज (task horizons) और कठिनाई के सूक्ष्म, नियंत्रणीय हेरफेर के लिए स्थिर JSON वातावरणों के साथ एक एकीकृत ग्रिड-आधारित योजना कार्य का उपयोग करता है, जिससे मौजूदा बेंचमार्क में प्रचलित उच्च ओवरहेड और अविश्वसनीय स्कोरिंग संबंधी समस्याओं का समाधान होता है।