SKG-Eval: Stateful Evaluation of Multi-Turn Dialogue via Incremental Semantic Knowledge Graphs
SKG-Eval एक नवीन, व्याख्यात्मक ढांचा है जो संरचित अवस्था ट्रैकिंग के माध्यम से लंबी दूरी की विसंगतियों और विरोधाभासों का पता लगाने के लिए एक सिमेंटिक नॉलेज ग्राफ को वृद्धिशील रूप से निर्मित करके मल्टी-टर्न संवाद प्रणालियों का मूल्यांकन करता है, जिससे मौजूदा फ्लैट या टर्न-पृथक मेट्रिक्स की तुलना में मानव निर्णयों के साथ उच्च सहसंबंध प्राप्त होता है।