Litmus: Zero-Label, Code-Driven Metric Specification for Evaluating AI Systems
यह शोध पत्र लिटमस (Litmus) को प्रस्तुत करता है, जो एक ज़ीरो-लेबल प्रणाली है जो सोर्स कोड और लक्षित पूछताछ से सीधे इरादे (intent) को निकालकर AI पाइपलाइनों के लिए स्वतः ही न्यायसंगत, कम-अतिरेक वाले मूल्यांकन मेट्रिक्स व्युत्पन्न करती है, जिससे यह बिना किसी मैन्युअल लेबल की आवश्यकता के वैधता और कवरेज में मौजूदा बेसलाइन से बेहतर प्रदर्शन करती है।