CUB: Benchmarking Context Utilisation Techniques for Language Models
यह शोध पत्र CUB को प्रस्तुत करता है, जो रिट्रीवल-ऑगमेंटेड जनरेशन (Retrieval-Augmented Generation) में कॉन्टेक्स्ट यूटिलाइजेशन मैनिपुलेशन टेक्निक्स (CMTs) के मूल्यांकन के लिए पहला व्यापक बेंचमार्क है, जो व्यापक परीक्षण के माध्यम से यह प्रकट करता है कि अधिकांश मौजूदा विधियाँ विविध वास्तविक दुनिया के शोर वाले संदर्भों (noisy contexts) के साथ संघर्ष करती हैं और अक्सर सरलीकृत सिंथेटिक डेटासेट पर बढ़ा-चढ़ाकर प्रदर्शन करती हैं।