Large Language Models for Math Education in Low-Resource Languages: A Study in Sinhala and Tamil
यह अध्ययन एक मूल-लिखित समानांतर डेटासेट का उपयोग करके कम-संसाधन वाली भाषाओं सिंहल और तमिल में बड़े भाषा मॉडलों की गणितीय तर्क क्षमताओं का मूल्यांकन करता है, जिससे यह पता चलता है कि जबकि बुनियादी अंकगणित अच्छी तरह से स्थानांतरित होता है, जटिल तर्क प्रदर्शन अंग्रेजी की तुलना में काफी घट जाता है, जो बहुभाषी शैक्षिक संदर्भों में एआई ट्यूटर्स को तैनात करने से पहले भाषा-विशिष्ट मूल्यांकनों की आवश्यकता को रेखांकित करता है।
मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें
कल्पना कीजिए कि आपके पास एक शानदार, सर्वज्ञ ट्यूटर है जो आपके द्वारा पूछे गए लगभग किसी भी गणित के सवाल को अंग्रेजी में हल कर सकता है। वे एक मास्टर शेफ की तरह हैं जो एक बेहतरीन स्टेक, एक नाजुक सूफ़ले और एक जटिल करी को समान सहजता से बना सकते हैं।
अब, कल्पना कीजिए कि आप उसी शेफ को वही व्यंजन बनाने के लिए कहते हैं, लेकिन इस बार, आप उन्हें रेसिपी सिंहल (Sinhala) और तमिल (Tamil) (श्रीलंका की दो प्रमुख भाषाएं) में देते हैं। आप यह मान सकते हैं, "खैर, अगर उन्हें गणित आता है, तो भाषा से क्या फर्क पड़ता है, है ना?"
यह शोध पत्र कहता है: "इतना जल्दी नहीं।"
शोधकर्ताओं (श्रीलंका, फिनलैंड और ऑस्ट्रेलिया की एक टीम) ने इसी परिदृश्य का परीक्षण करने का निर्णय लिया। वे यह देखना चाहते थे कि क्या AI ट्यूटर उन छात्रों के लिए वास्तव में सहायक हैं जो सिंहल या तमिल बोलते हैं, या वे केवल "नकली विशेषज्ञ" हैं जो केवल तभी खाना बनाना जानते हैं जब रेसिपी अंग्रेजी में हो।
यहाँ उनके अध्ययन का विवरण दिया गया है, कुछ रोजमर्रा के उपमाओं (analogies) का उपयोग करते हुए:
1. "अनुवादित" रेसिपी के साथ समस्या
अतीत में, शोधकर्ताओं ने अंग्रेजी के गणित के सवालों को लेकर उन्हें सिंहल या तमिल संस्करणों में बदलने के लिए एक ट्रांसलेशन टूल के माध्यम से टेस्ट किया था।
- उपमा: यह एक बेहतरीन अंग्रेजी रेसिपी को लेने, उसे गूगल ट्रांसलेट के माध्यम से चलाने और फिर परिणाम को एक शेफ को सौंपने जैसा है। यदि व्यंजन का स्वाद खराब है, तो आपको पता नहीं चलेगा कि शेफ बुरा है, या रेसिपी ही खराब थी और उसका कोई अर्थ नहीं निकल रहा था।
- समाधान: लेखकों ने ऐसा नहीं किया। उन्होंने उन मूल वक्ताओं को काम पर रखा जो गणित के विशेषज्ञ भी हैं, ताकि वे अंग्रेजी, सिंहल और तमिल में शुरू से बिल्कुल नई गणित की समस्याएं लिख सकें। यह सुनिश्चित करता है कि हर भाषा में "रेसिपी" एकदम सही है, ताकि यदि व्यंजन विफल हो जाए, तो वे दोष सीधे शेफ (AI) को दे सकें।
2. गणित की कठिनाई के छह स्तर
उन्होंने केवल एक प्रकार के गणित का परीक्षण नहीं किया। उन्होंने आसान से लेकर दिमाग घुमा देने वाले चुनौतियों तक, छह अलग-अलग प्रकार के चैलेंज वाला एक "मेन्यू" बनाया:
- एक-चरणीय (Single-Step): "यदि मेरे पास 2 सेब हैं और मैं 3 और खरीदता हूँ, तो मेरे पास कितने हैं?" (बहुत आसान)।
- बहु-चरणीय (Multi-Step): "मेरे पास 2 सेब हैं, 3 खरीदे, 1 खाया, और बाकी को 2 दोस्तों के बीच बांटा..." (इसके लिए सोचने की एक श्रृंखला की आवश्यकता है)।
- भटकाने वाला तत्व (The Distractor): "मेरे पास 2 सेब, 3 संतरे और एक लाल टोपी है। मेरे पास कितने फल हैं?" (AI को टोपी को अनदेखा करना होगा)।
- इकाई भ्रम (Unit Confusion): "मेरे पास रस्सी के 2 मीटर हैं और मुझे इसे सेंटीमीटर में काटना है।" (AI को यह समझना होगा कि मीटर और सेंटीमीटर अलग हैं)।
- तार्किक निष्कर्ष (Logical Deduction): "यदि X, Y से दोगुना पुराना है, और Y, Z से 5 साल छोटा है..." (शब्दों को बीजगणित में बदलना)।
- अनुकूलन (Optimization): "एक विशिष्ट क्षेत्र वाले बगीचे के चारों ओर बाड़ बनाने का सबसे सस्ता तरीका क्या है?" (सबसे अच्छा समाधान खोजना)।
3. परिणाम: "भाषा का अंतर"
जब उन्होंने इन समस्याओं को चार शीर्ष AI मॉडलों (जैसे GPT-4, Claude और Gemini) को दिया, तो जो हुआ वह यहाँ है:
- आसान चीजें (प्रकार 1 और 2): AI तीनों भाषाओं में एक सुपरस्टार था। चाहे वह अंग्रेजी हो, सिंहल हो या तमिल, वह सरल गणित को पूरी तरह से कर सकता था। यह ऐसा है जैसे शेफ किसी भी भाषा में प्याज काट सकता है और पानी उबाल सकता है।
- जटिल चीजें (प्रकार 4 और 6): यहीं पर AI लड़खड़ाया।
- इकाई भ्रम: अंग्रेजी में, AI जानता था कि "2 ms" का अर्थ मिलीसेकंड है। लेकिन सिंहल और तमिल में, वह अक्सर इकाइयों को बदलना भूल जाता था, उन्हें "सेकंड" समझ लेता था। यह ऐसा है जैसे शेफ "ग्राम" पढ़ रहा है लेकिन माप "कप" में ले रहा है क्योंकि भाषा की लिपि ने उसे भ्रमित कर दिया।
- अनुकूलन (Optimization): यह सबसे बड़ी गिरावट थी। अंग्रेजी में, एक AI ने 88% सही उत्तर दिया। तमिल में, वही AI घटकर 52% पर आ गया। यह मुश्किल से एक सिक्के के उछाल (coin flip) जैसा है! यह ऐसा है जैसे शेफ अचानक एक जटिल केक बनाना भूल जाता है सिर्फ इसलिए क्योंकि निर्देश दूसरी भाषा में थे।
4. "ब्लैक बॉक्स" का रहस्य
शोधकर्ता संदेह करते हैं कि भले ही AI तमिल या सिंहल में सोचता हुआ दिखता है, लेकिन वास्तव में वह अपने "दिमाग" में सवाल को अंग्रेजी में अनुवाद कर रहा होगा, उसे हल कर रहा होगा, और फिर जवाब को वापस अनुवाद कर रहा होगा।
- उपमा: कल्पना कीजिए कि एक छात्र तमिल में परीक्षा दे रहा है। वह प्रश्न पढ़ता है, मन ही मन उसे अपने अंग्रेजी बोलने वाले दोस्त को फुसफुसाकर बताता है, उत्तर प्राप्त करता है, और फिर उस उत्तर को वापस खुद को तमिल में फुसफुसाता है। यदि फुसफुसाने की प्रक्रिया धीमी या त्रुटिपूर्ण है, तो वह गलत उत्तर देगा। AI भी कुछ ऐसा ही कर रहा प्रतीत होता है।
5. स्कूलों के लिए यह क्यों मायने रखता है
इसका मुख्य निष्कर्ष श्रीलंका (और अन्य किसी भी जगह जहाँ कम-संसाधन वाली भाषाएँ बोली जाती हैं) के शिक्षकों और स्कूलों के लिए एक चेतावनी है:
- AI पर आँख मूंदकर भरोसा न करें। यदि कोई शिक्षक सिंहल या तमिल में जटिल गणित के साथ छात्रों की मदद करने के लिए AI टूल का उपयोग करता है, तो उन्हें आधे समय गलत उत्तर मिल सकते हैं।
- संदर्भ ही सब कुछ है (Context is King)। सिर्फ इसलिए कि एक AI अंग्रेजी में स्मार्ट है, इसका मतलब यह नहीं है कि वह हर भाषा में स्मार्ट है।
- "ह्यूमन इन द लूप": शिक्षकों को AI के काम की दोबारा जाँच करने की आवश्यकता है, विशेष रूप से इकाइयों या जटिल तर्क वाले कठिन सवालों के लिए।
निचोड़
AI एक शक्तिशाली उपकरण है, लेकिन अभी यह एक द्विभाषी गाइड की तरह है जो अंग्रेजी में विशेषज्ञ है लेकिन सिंहल और तमिल में एक पर्यटक है। वे स्थलों (सरल गणित) की ओर इशारा कर सकते हैं, लेकिन यदि आप उनसे उन स्थानीय भाषाओं में एक जटिल भूलभुलैया (इकाइयों और तर्क के साथ उन्नत गणित) को नेविगेट करने के लिए कहेंगे, तो वे भटक सकते हैं।
इससे पहले कि हम इन AI ट्यूटर्स को गैर-अंग्रेजी भाषी देशों के क्लासरूम में हावी होने दें, हमें उन्हें गणित की स्थानीय भाषा को बहुत बेहतर तरीके से सिखाने की आवश्यकता है।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।