Rotate2Think: Geometric Priming via Orthogonal Rotation to Improve Language Model Reasoning
यह शोध पत्र Rotate2Think का प्रस्ताव करता है, जो एक प्रशिक्षण-मुक्त (training-free) विधि है जो इनपुट एम्बेडिंग्स पर एक ऑर्थोगोनल रोटेशन का अनुमान लगाकर और उसे लागू करके भाषा मॉडल की तर्क क्षमता में सुधार करती है ताकि सिंथेटिक थिंकिंग ट्रेसेस (synthetic thinking traces) उत्पन्न करने के लिए मॉडल को ज्यामितीय रूप से तैयार किया जा सके, जिससे विविध गणितीय, वैज्ञानिक और कोडिंग बेंचमार्क पर प्रदर्शन में उल्लेखनीय वृद्धि होती है।
मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें
यह ऐसा है जैसे रोबोट को एक पहले से लिखा हुआ नोट थमा देना जिसमें लिखा हो, "एक बुद्धिमान विचारक इस समस्या को इस तरह शुरू करता है," इससे पहले कि रोबोट बोलना भी शुरू करे।
4. यह अद्भुत क्यों है
- कोई प्रशिक्षण आवश्यक नहीं: उन्हें रोबोट को फिर से सिखाने की आवश्यकता नहीं पड़ी। उन्होंने बस गणित (विशेष रूप से "ऑर्थोगोनल प्रोक्रस्टेस विश्लेषण" जिसे एक फैंसी तरीका कहा जाता है जो सबसे अच्छा कोण खोजने के लिए उपयोग किया जाता है) का उपयोग करके वह कोण खोज लिया।
- हर जगह काम करता है: उन्होंने इसे गणित, विज्ञान और कोडिंग कार्यों पर परखा। 32 में से 30 परीक्षणों में, रोबोट समस्याओं को हल करने में बेहतर हुआ।
- यह तेज़ है: यह प्रक्रिया में लगभग कोई अतिरिक्त समय नहीं जोड़ता क्योंकि यह केवल एक एकल गणितीय रोटेशन (घूर्णन) है, न कि टेक्स्ट का एक लंबा जेनरेशन।
- यह चित्रों पर भी काम करता है: सबसे आश्चर्यजनक बात? उन्होंने इस रोटेशन को केवल टेक्स्ट समस्याओं का उपयोग करके प्रशिक्षित किया। जब उन्होंने इस समान "धक्के" (nudge) का उपयोग विजुअल मैथ प्रॉब्लम्स (संख्याओं वाले चित्र) को हल करने वाले रोबोट पर किया, तो यह अभी भी काम कर गया! यह सुझाव देता है कि "सोचने" की दिशा रोबोट के मस्तिष्क का एक मौलिक हिस्सा है, न कि केवल टेक्स्ट तक सीमित।
मुख्य बात (The Bottom Line)
पेपर का दावा है कि "सोचना" केवल शब्दों की एक लंबी सूची नहीं है; यह एक विशिष्ट ज्यामितीय अवस्था (geometric state) है जिसमें रोबोट का मस्तिष्क प्रवेश करता है। रोबोट को "पढ़ने मोड" से "सोचने मोड" में बदलने के लिए आवश्यक सटीक रोटेशन की गणना करके, वे बिना किसी अतिरिक्त प्रशिक्षण या लागत के, रोबोट को कठिन समस्याओं को अधिक सटीकता से हल करने के लिए तुरंत तैयार (prime) कर सकते हैं।
पेपर में बताई गई सीमाएँ:
- आपको रोबोट की आंतरिक "मस्तिष्क" अवस्थाओं को देखने में सक्षम होना चाहिए (यह उन क्लोज्ड, ब्लैक-बॉक्स मॉडल्स पर काम नहीं करता है जहाँ आप अंदर नहीं झाँक सकते)।
- आपको रोबोट का एक ऐसा संस्करण चाहिए जो रोटेशन सीखने के लिए पहले से सही ढंग से "सोच" सके।
- यह गणित और विज्ञान पर सबसे अच्छा काम करता है; कोडिंग कार्यों पर सुधार कम था।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।