Where Did It Go Wrong? Process-Level Evaluation of Web Agents with Semantic State Tracking
यह शोधपत्र WebStep प्रस्तुत करता है, जो वेब एजेंटों के प्रक्रिया-स्तरीय मूल्यांकन को सक्षम करने के लिए स्वचालित सिमेंटिक स्टेट ट्रैकिंग वाला एक नवीन बेंचमार्क है, जो उन विशिष्ट कौशल कमियों और त्रुटि प्रकारों में सूक्ष्म, कार्रवाई योग्य अंतर्दृष्टि प्रकट करता है जिन्हें पारंपरिक परिणाम-आधारित मेट्रिक्स पकड़ने में विफल रहते हैं।