Designing Reliable LLM-as-a-judge Measurement Systems for Multi-turn Business Agents
Dieses Paper präsentiert ein praktisches, wartbares Framework zur Evaluierung von Multi-Turn-Business-Agenten, das modulare LLM-Judges, absichtserhaltende Nutzersimulation und Human-in-the-Loop-Governance integriert, um eine zuverlässige, handlungsrelevante Messung der Agentenleistung und geschäftlichen Wissenslücken zu gewährleisten.