ReasonMap: Towards Fine-Grained Visual Reasoning from Transit Maps
यह शोध पत्र ReasonMap प्रस्तुत करता है, जो एक नया बेंचमार्क है जिसमें उच्च-रिज़ॉल्यूशन वाले ट्रांजिट मानचित्र और विविध प्रश्न-उत्तर जोड़े शामिल हैं ताकि मल्टीमॉडल लार्ज लैंग्वेज मॉडल्स की सूक्ष्म दृश्य तर्क क्षमताओं का मूल्यांकन किया जा सके, जो यह प्रकट करता है कि ओपन-सोर्स बेस मॉडल अक्सर अपने रीजनिंग-ट्यून्ड वेरिएंट्स से बेहतर प्रदर्शन करते हैं और भाषा के पूर्वग्रहों (लैंग्वेज प्रायर्स) के बजाय प्रत्यक्ष विजुअल ग्राउंडिंग की महत्वपूर्ण आवश्यकता पर जोर देते हैं।