Beyond Understanding: Evaluating the Pragmatic Gap in LLMs' Cultural Processing of Figurative Language
यह शोध पत्र यह प्रदर्शित करके बड़े भाषा मॉडलों (लार्ज लैंग्वेज मॉडल्स) के सांस्कृतिक प्रसंस्करण में व्यावहारिक अंतराल का मूल्यांकन करता है कि यद्यपि वे लाक्षणिक भाषा की व्याख्या कर सकते हैं, फिर भी वे अंग्रेजी की तुलना में मिस्र की अरबी मुहावरों और लोकोक्तियों जैसे सांस्कृतिक रूप से आधारित अभिव्यक्तियों के साथ काफी अधिक संघर्ष करते हैं, जो भविष्य के अनुसंधान को समर्थन देने के लिए 'किनायात' (Kinayat) डेटासेट के विमोचन को प्रेरित करता है।