Chat-Based Support Alone May Not Be Enough: Comparing Conversational and Embedded LLM Feedback for Mathematical Proof Learning
GPTutor सिस्टम का उपयोग करने वाले 148 स्नातक छात्रों के एक अध्ययन में यह निष्कर्ष निकला है कि हालांकि संरचित, अंतर्निहित प्रमाण-समीक्षा फीडबैक ने सीखने के परिणामों को नुकसान नहीं पहुँचाया, लेकिन चैटबॉट-आधारित सहायता पर निर्भरता—विशेष रूप से उत्तर-खोजने वाले व्यवहार—परवर्ती परीक्षा प्रदर्शन के साथ नकारात्मक रूप से जुड़ा हुआ था, जो यह सुझाव देता है कि केवल संवादात्मक एआई स्वतंत्र गणितीय प्रमाण मूल्यांकनों में स्थानांतरण को प्रभावी ढंग से बढ़ावा नहीं दे सकता है।
मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें
कल्पना कीजिए कि आप एक जटिल, तार्किक कहानी (एक गणितीय प्रमाण/प्रूफ) लिखना सीख रहे हैं। आपके पास एक नया, बेहद बुद्धिमान AI सहायक उपलब्ध है जो आपकी मदद कर सकता है। लेकिन यह सहायक दो बहुत अलग "व्यक्तित्वों" में आता है:
- द चैटी फ्रेंड (द चैटबॉट - बातूनी दोस्त): आप इसमें आगे-पीछे संदेश भेज सकते हैं। आप पूछते हैं, "मैं कैसे शुरू करूँ?" और यह आपको संकेत दे सकता है, या यदि आप ज़ोर देते हैं, तो यह बस आपको उत्तर भी बता सकता है।
- द स्ट्रिक्ट एडिटर (द प्रूफ-रिव्यू टूल - सख्त संपादक): आपको पहले अपनी कहानी लिखनी ही होगी। फिर, आप उसे पेस्ट करते हैं। यह टूल आपसे बात नहीं करता; यह बस कुछ विशिष्ट वाक्यों को लाल रंग में हाइलाइट करता है और हाशिए में टिप्पणियाँ लिखता है जैसे, "यह तर्क मेल नहीं खाता," या "यहाँ बहुत अच्छा काम किया।" यह आपके लिए कहानी लिखने से इनकार करता है।
कार्नेगी मेलन यूनिवर्सिटी के शोधकर्ताओं ने यह देखने के लिए कि कौन से दो सहायक वास्तव में छात्रों को गणित में बेहतर बनाते हैं, छात्रों को GPTutor नामक एक सिस्टम तक पहुँच दी, जिसमें ये दोनों उपकरण थे।
यहाँ उन्हें जो मिला, उसे सरल रूप में दिया गया है:
1. "होमवर्क बनाम परीक्षा" का आश्चर्य
जब छात्रों के पास AI तक पहुँच थी, तो उनके होमवर्क के स्कोर बढ़ गए। यह एक सुरक्षा जाल की तरह था; वे अपने प्रमाण (प्रूफ़) तैयार कर सकते थे, फीडबैक ले सकते थे, गलतियों को सुधार सकते थे और बेहतर काम जमा कर सकते थे।
हालाँकि, जब मिडटर्म परीक्षाओं का समय आया (जहाँ वे AI का उपयोग नहीं कर सकते थे), तो जिन छात्रों ने इस टूल का उपयोग किया था, उनके स्कोर उन छात्रों से अधिक नहीं थे जिन्होंने इसका उपयोग नहीं किया था।
- उपमा: यह बास्केटबॉल का अभ्यास करने जैसा है जहाँ एक कोच आपके लिए बास्केट को थामे रहता है। आप अभ्यास के दौरान (होमवर्क) बहुत सारे शॉट लगाते हैं, लेकिन जब आप बिना कोच के वास्तविक खेल (परीक्षा) खेलते हैं, तो आप दूसरों की तरह ही शॉट मिस करते हैं। अभ्यास वास्तविक कौशल में परिवर्तित नहीं हुआ।
2. "चैटी फ्रेंड" का खतरा
अध्ययन ने यह देखने के लिए गहराई से जाँच की कि छात्रों ने इन उपकरणों का उपयोग कैसे किया। उन्हें एक डरावना पैटर्न मिला जो चैटबॉट के साथ था:
- जिन छात्रों को अपने गणित कौशल में कम आत्मविश्वास (कम "स्व-प्रभावकारिता") महसूस होता था, उन्होंने चैटबốt का सबसे अधिक उपयोग किया।
- महत्वपूर्ण रूप से, इन छात्रों ने जितना अधिक चैट किया, उनकी परीक्षा में प्रदर्शन उतना ही खराब हुआ।
- रूपक: चैटबॉट एक "बैसाखी" की तरह था। जिन छात्रों के पैर कमजोर थे, वे इस पर इतना झुके कि उनके अपने मांसपेशियाँ (उनके अपने तर्क कौशल) कभी खुद चलने के लिए पर्याप्त मजबूत नहीं हो सकीं। भले ही बॉट को संकेत देने के लिए प्रोग्राम किया गया था, छात्रों ने अक्सर संकेतों को दरकिनार कर दिया और सीधे उत्तर मांग लिया, जिससे उनकी अपनी सीखने की प्रक्रिया बाधित हो गई।
3. "स्ट्रिक्ट एडिटर" की सुरक्षा
प्रूफ-रिव्यू टूल ने एक अलग कहानी बताई।
- इस टूल का उपयोग करने वाले छात्र भी वे ही थे जो संघर्ष कर रहे थे।
- लेकिन, इस टूल का उपयोग करने से उनके परीक्षा स्कोर को नुकसान नहीं पहुँचा। इसने उन्हें आसमान छूने में मदद तो नहीं की, लेकिन उन्हें नीचे भी नहीं खींचा।
- रूपक: यह टूल एक "दर्पण" की तरह था। आपको इसके सामने खड़ा होना था और अपने काम को देखना था। इसने आपकी कमियों की ओर इशारा किया, लेकिन आपको उन्हें खुद ही ठीक करना था। क्योंकि आपको भारी काम खुद करना पड़ा, इसलिए आपने अपनी स्वतंत्र रूप से सोचने की क्षमता नहीं खोई।
मुख्य निष्कर्ष
इस शोध पत्र का मुख्य संदेश है: सिर्फ एक स्मार्ट AI चैटबॉट होना ही आपको कठिन चीजें सिखाने के लिए पर्याप्त नहीं है।
यदि आप AI को अपने साथ स्वतंत्र रूप से चैट करने देते हैं, तो आप आलसी हो सकते हैं और अपने आप सोचना बंद कर सकते हैं। आप टूल का उपयोग करने में अच्छे हो सकते हैं, लेकिन आप विषय में अच्छे नहीं बनेंगे।
हालाँकि, यदि आप AI को एक सख्त संपादक के रूप में कार्य करने के लिए मजबूर करते हैं—जहाँ आपको पहले काम करना पड़ता है, और AI केवल आपकी विशिष्ट गलतियों की आलोचना करता है—तो आप अत्यधिक निर्भरता के जाल से बच जाते हैं। आप अभी भी संघर्ष करते हैं (जो कि सीखने के लिए अच्छा है), लेकिन आप अपने दिमाग को मशीन को आउटसोर्स नहीं करते हैं।
संक्षेप में: AI को अपने लिए कहानी लिखने न दें। इसे अपनी कहानी संपादित करने दें, लेकिन सुनिश्चित करें कि कलम आप ही पकड़े हुए हैं।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।