Thinking Past the Answer: Evaluating Harmful Overthinking in Large Reasoning Models
यह शोध पत्र एक प्रीफ़िक्स-स्तरीय मूल्यांकन प्रोटोकॉल प्रस्तुत करता है जो यह प्रदर्शित करता है कि लार्ज रीजनिंग मॉडल्स अक्सर "हानिकारक ओवरथिंकिंग" (harmful overthinking) से ग्रस्त होते हैं, जहाँ सही उत्तर तक पहुँचने के बाद भी तर्क जारी रखने से समाधान अस्थिर हो जाता है, जिससे यह पता चलता है कि वर्तमान मॉडल न केवल तर्क करने की क्षमता से बल्कि सही समय पर रुकने में असमर्थता से भी सीमित हैं।
मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें
मुख्य विचार: जब "बहुत अधिक सोचना" उल्टा पड़ जाता है
कल्पना कीजिए कि आप गणित की परीक्षा दे रहे हैं। आप एक सवाल पढ़ते हैं, अपने दिमाग में गणना करते हैं, और अचानक आपके मन में उत्तर आता है: "उत्तर 42 है।" आप आश्वस्त महसूस करते हैं। आप इसे लिख देते हैं।
लेकिन फिर, आपका दिमाग चलता रहता है। आप खुद पर संदेह करने लगते हैं। "रुको, क्या मैंने स्टेप्स सही से गिने थे? शायद यह 41 हो? या शायद 43?" आप अपने काम को बार-बार लिखते हैं, नंबर बदलते हैं, और उस सरल तर्क को बहुत जटिल बना देते हैं जिसे आपने अभी-अभी समझा था। जब आप अपनी लंबी, खिंची हुई सोचने की प्रक्रिया पूरी करते हैं, तो आप खुद को यकीन दिला चुके होते हैं कि उत्तर 43 है। आप अपना पेपर गलत उत्तर के साथ जमा कर देते हैं, जबकि आप शुरू से ही सही उत्तर जानते थे।
यह शोध पत्र तर्क देता है कि लार्ज रीजनिंग मॉडल्स (LRMs)—वे सुपर-स्मार्ट AI सिस्टम जिन्हें बोलने से पहले "सोचने" के लिए डिज़ाइन किया गया है—बिल्कुल यही कर रहे हैं। वे अक्सर जल्दी ही सही उत्तर ढूंढ लेते हैं, लेकिन फिर वे तब तक "सोचते" रहते हैं जब तक कि वे गलती से खुद को एक गलत उत्तर की ओर नहीं ले जाते।
मूल समस्या: "ओवरथिंकिंग" के दो प्रकार
शोधकर्ताओं ने महसूस किया कि "बहुत अधिक सोचना" केवल एक बुरी चीज़ नहीं है। उन्होंने इसे दो श्रेणियों में विभाजित किया:
वर्बोस ओवरथिंकिंग (बातूनी दोस्त - Verbose Overthinking):
- यह क्या है: AI सही उत्तर ढूंढ लेता है, बातें करता रहता है, लेकिन अपना मन नहीं बदलता। वह बस बहुत सारी अनावश्यक बातें जोड़ता रहता है।
- उपमा: यह उस दोस्त की तरह है जिसे पता है कि दुकान तक कैसे जाना है। वह कहता है, "बाएं मुड़ें।" फिर वह बातें करता रहता है: "ओह, और लाइट लाल है, और वहां एक कुत्ता है, और कुत्ता भूरा है, और भूरा एक अच्छा रंग है..." वह दिशा नहीं बदलता, बस समय बर्बाद करता है।
- परिणाम: यह अक्षम है (समय बर्बाद करता है), लेकिन उत्तर अभी भी सही है।
हार्मफुल ओवरथिंकिंग (भ्रमित जासूस - Harmful Overthinking):
- यह क्या है: AI सही उत्तर ढूंढ लेता है, सोचता रहता है, और फिर अपना मन बदलकर गलत उत्तर पर आ जाता है।
- उपमा: यह उस दोस्त की तरह है जो कहता है, "बाएं मुड़ें," लेकिन फिर संदेह करने लगता है। "रुको, शायद वह कुत्ता वास्तव में एक बिल्ली है? अगर वह बिल्ली है, तो शायद मुझे दाएं मुड़ना चाहिए? नहीं, रुको, शायद लाइट हरी है? ठीक है, मैं दाएं मुड़ जाता हूँ।" वे अंत में गलत दिशा में चले जाते हैं क्योंकि उन्होंने स्थिति का बहुत अधिक विश्लेषण कर लिया।
- परिणाम: यह खतरनाक है। AI के पास समाधान था, लेकिन उसकी अपनी अतिरिक्त सोच ने उसे बिगाड़ दिया।
उन्होंने इसका परीक्षण कैसे किया
शोधकर्ताओं ने केवल अनुमान नहीं लगाया; उन्होंने AI की सोच के लिए एक विशेष "स्टॉप-वॉच" बनाई।
- "प्रथम सही क्षण" परीक्षण (The "First Correct Moment" Test): उन्होंने AI की सोचने की प्रक्रिया को चरण-दर-चरण देखा। उन्होंने पूछा: "AI ने ठीक किस क्षण में पहली बार सही उत्तर प्राप्त किया था?"
- तुलना: उन्होंने AI के वास्तविक व्यवहार (उसे जितना चाहे सोचने देने) की तुलना एक इष्टतम रणनीति (AI को ठीक उसी क्षण रोकने जब वह सही उत्तर पा लेता है) से की।
चौंकाने वाला परिणाम:
जब उन्होंने AI को सही उत्तर मिलते ही रोक दिया, तो AI के स्कोर बहुत बेहतर हो गए (कुछ मामलों में 21% तक बेहतर)। इससे यह साबित हुआ कि AI लंबे समय तक सोचकर स्मार्ट नहीं हो रहा था; बल्कि वह बहुत लंबे समय तक सोचकर वास्तव में "बेवकूफ" होता जा रहा था।
ऐसा क्यों होता है?
शोधकर्ताओं ने देखा कि AI अपना मन क्यों बदलता है जब उसे सही उत्तर मिल जाता है। उन्हें दो मुख्य कारण मिले:
लॉजिकल ड्रिफ्ट (The "Wait, but..." Trap - तर्क का भटकना):
- AI एक ठोस तर्क श्रृंखला के साथ शुरू करता है। फिर, वह बहुत चतुर बनने की कोशिश करता है। वह एक नया संबंध या एक "क्या होगा अगर" वाली स्थिति बना देता है जो सच नहीं है, जिससे पूरी सोच पटरी से उतर जाती है।
- उदाहरण: "पक्षी नीला है। नीला एक शानदार रंग है। शानदार रंग दुर्लभ होते हैं। इसलिए, पक्षी दुर्लभ है।" (यहाँ तर्क टूट जाता है)।
विजुअल रीइंटरप्रिटेशन (The "I Saw It Wrong" Trap - दृश्य पुनर्व्याख्या):
- यह ज्यादातर चित्रों के साथ होता है। AI एक छवि को देखता है, वस्तुओं को सही ढंग से गिनता है, लेकिन फिर देखते-देखते वह खुद को यकीन दिला देता है कि उसने कुछ मिस कर दिया है।
- उदाहरण: "मैं 5 ईंटें देख रहा हूँ। रुको, करीब से देखने पर, शायद वह छाया एक गायब ईंट है? नहीं, रुको, शायद 6 ईंटें हैं? ठीक है, मैं 6 कहूँगा।" (उसने एक सही गिनती को गलत में बदल दिया)।
यह क्या नहीं है: आश्चर्यजनक रूप से, AI आमतौर पर खराब गणित (गणना त्रुटियों) के कारण गलती नहीं करता। वह इसलिए गलती करता है क्योंकि उसने अपने तर्क या दृश्य के बारे में अपना मन बदल लिया।
क्या यह हर जगह होता है?
- हाँ। यह चित्रों (मल्टीमॉडल) और केवल टेक्स्ट (भाषा-मात्र) दोनों के साथ होता है।
- हाँ। यह बहुविकल्पीय प्रश्नों (जहाँ आपको A, B, C या D चुनना होता है) और मुक्त-रूप (free-form) प्रश्नों (जहाँ आपको उत्तर लिखना होता है) दोनों के साथ होता है।
- ट्विस्ट: यह वास्तव में मुक्त-रूप प्रश्नों में अधिक होता है। क्योंकि AI को किसी सूची से चुनने के लिए मजबूर नहीं किया जाता, इसलिए वह रास्ते से भटकने और गलत उत्तर गढ़ने के लिए अधिक स्वतंत्र महसूस करता है।
वर्तमान समाधान काम क्यों नहीं करते
लोगों ने AI को "जल्दी सोचने" (Early Stopping) के लिए कहकर इसे ठीक करने की कोशिश की है।
- शोध पत्र का निष्कर्ष: यह "वर्बोस ओवरथिंकिंग" (बातूनी दोस्त) के लिए काम करता है। यह AI को समय बर्बाद करने से रोकता है।
- लेकिन: यह "हार्मफुल ओवरथिंकिंग" (भ्रमित जासूस) को ठीक नहीं करता है। भले ही आप AI को जल्दी रुकने के लिए मजबूर करें, यदि वह बहुत लंबे समय तक सोचता है, तो उसमें सही उत्तर को गलत में बदलने की प्रवृत्ति बनी रहती है।
मुख्य निष्कर्ष
यह शोध पत्र इस निष्कर्ष पर पहुँचता है कि वर्तमान धारणा—"यदि हम बस AI को लंबे समय तक सोचने दें, तो वह स्मार्ट हो जाएगा"—अपूर्ण है।
कभी-कभी, AI उस छात्र की तरह होता जो उत्तर जानता है लेकिन उसे मिटाकर कुछ और लिखने के लिए बार-बार मिटाता रहता है। इन मॉडल्स के लिए सबसे बड़ी चुनौती केवल यह नहीं है कि वे कैसे तर्क करें; बल्कि यह है कि वे कब रुकें। एक AI के लिए सबसे समझदारी भरा कदम यह पहचानना हो सकता है कि, "मेरे पास उत्तर है," और बिना किसी सुधार के तुरंत चुप हो जाना, बजाय इसके कि वह एक ऐसे समाधान को और बेहतर बनाने की कोशिश करे जो पहले से ही पूर्ण है।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।