GMoT: Gated Motion-Aware Tokenization for Fine-Grained Micro-Gesture Video Reasoning with Multimodal LLMs
यह शोध पत्र GMoT को प्रस्तुत करता है, जो एक गेटेड मोशन-अवेयर टोकनाइज़ेशन मॉड्यूल है जिसे एक प्रोग्रेसिव रिवॉर्ड-गाइडेड पॉलिसी रिफाइनमेंट प्रतिमान के साथ संयोजित किया गया है, ताकि स्पार्स काइनेमैटिक एविडेंस और एनाटॉमिकल ग्राउंडिंग को स्पष्ट रूप से डिस्टिल करके मल्टीमॉडल लार्ज लैंग्वेज मॉडल्स की सूक्ष्म-जेस्चर वीडियो रीजनिंग करने की क्षमता को बढ़ाना है, जिससे iMiGUE और SMG बेंचमार्क पर स्टेट-ऑफ-द-आर्ट प्रदर्शन प्राप्त होता है।