TopBench: A Benchmark for Implicit Prediction and Reasoning over Tabular Question Answering
यह शोधपत्र TopBench प्रस्तुत करता है, जो सारणीबद्ध डेटा (tabular data) पर निहित भविष्यवाणात्मक तर्क (implicit predictive reasoning) पर लार्ज लैंग्वेज मॉडल्स का मूल्यांकन करने के लिए डिज़ाइन किया गया एक नया बेंचमार्क है, जो यह प्रकट करता है कि वर्तमान मॉडल इरादे की पहचान (intent recognition) में संघर्ष करते हैं और अक्सर ऐतिहासिक पैटर्न से अप्रत्यक्ष उत्तरों का अनुमान लगाने के बजाय सरल लुकअप (lookups) पर ही निर्भर रहते हैं।