More Aligned, Less Diverse? Analyzing the Grammar and Lexicon of Two Generations of LLMs
यह अध्ययन HPSG औपचारिकता और विविधता मेट्रिक्स का उपयोग करते हुए मानव-लिखित समाचार पाठ के विरुद्ध LLMs की दो पीढ़ियों की तुलना करता है, जिससे यह पता चलता है कि जहाँ मानव लेखन स्थिर बना हुआ है, वहीं नए निर्देश-ट्यून किए गए मॉडल महत्वपूर्ण रूप से कम वाक्यात्मक और शाब्दिक विविधता प्रदर्शित करते हैं, जो बेहतर सुसंगतता के बावजूद अभिव्यक्ति की संभावित संकुचित सीमा का सुझाव देता है।
मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें
कल्पना कीजिए कि आप एक संगीत समीक्षक हैं जो दो बैंडों की तुलना कर रहे हैं: द ह्यूमन्स (पेशेवर पत्रकार) और द रोबोट्स (आर्टिफिशियल इंटेलिजेंस)। आप यह देखना चाहते हैं कि समय के साथ उनका संगीत कैसे बदल गया है।
यह शोध पत्र उनके संगीत के नोट्स (sheet music) की एक गहरी पड़ताल की तरह है। केवल धुन (शब्दों) को सुनने के बजाय, शोधकर्ताओं ने उनके व्याकरण (कॉर्ड्स और संरचना) और शब्दावली (उपयोग किए गए विशिष्ट वाद्य यंत्रों) का विश्लेषण किया ताकि यह देखा जा सके कि क्या रोबोट अधिक मानवीय लग रहे हैं या वे पूरी तरह से कुछ और बन रहे हैं।
उनके निष्कर्षों का सरल विवरण यहाँ दिया गया है:
1. सेटअप: दो युग, दो बैंड
शोधकर्ताओं ने दो अलग-अलग समय अवधियों की तुलना की:
- द ह्यूमन्स: उन्होंने 2023 और 2025 में द न्यूयॉर्क टाइम्स द्वारा लिखे गए समाचार लेखों को देखा।
- द रोबोट्स: उन्होंने AI मॉडल्स की दो पीढ़ियों की तुलना की:
- पुराने रोबोट्स (2023): ये "बेस" मॉडल थे। इन्हें ऐसे अनट्रेंड संगीतकारों के रूप में सोचें जो बस वही बजाते हैं जो उनके मन में आता है।
- नए रोबोट्स (2025): ये "इंस्ट्रक्शन-ट्यून्ड" (निर्देश-अनुकूलित) मॉडल हैं। इन्हें उन संगीतकारों के रूप में सोचें जिन्हें एक सख्त नियम पुस्तिका और एक कोच दिया गया है जो उन्हें ठीक से व्यवहार करने, बोलने और "सहायक" होने का निर्देश देता है।
2. बड़ी खोज: "अधिक संरेखित, कम विविध"
मुख्य निष्कर्ष थोड़ा आश्चर्यजनक है। आप उम्मीद कर सकते हैं कि जैसे-जैसे AI अधिक स्मार्ट और मानवीय निर्देशों के प्रति अधिक "संरेखित" (aligned) होता जाएगा, वह एक मानव लेखक की तरह अधिक सुनाई देने लगेगा।
वास्तविकता: नए AI मॉडल वास्तव में कम मानवीय और अपने पुराने संस्करणों से भी कम विविध होते जा रहे हैं।
- द ह्यूमन्स: पेशेवर पत्रकारों की लेखन शैली, वाक्य संरचना और शब्द चयन पिछले दो वर्षों में बहुत कम बदला है। वे एक जैज़ बैंड की तरह हैं जो नए विचारों के साथ निरंतर सुधार (improvisation) करते रहते हैं।
- पुराने रोबोट्स: ये मॉडल काफी विविध थे। वे वाक्य संरचनाओं और शब्दों की एक विस्तृत श्रृंखला का उपयोग करते थे, जो शब्दावली के मामले में कभी-कभी मनुष्यों से भी अधिक विविध थे।
- नए रोबोट्स: वे उबाऊ रूप से सुसंगत हो गए हैं। उन्होंने अपना "स्वाद" खो दिया है।
- सिंटैक्टिक डाइवर्सिटी (संरचना): वे कम प्रकार की वाक्य संरचनाओं का उपयोग करते हैं।
- लेक्सिकल डाइवर्सिटी (शब्द): वे शब्दों की बहुत संकीर्ण श्रेणी का उपयोग करते हैं। वे विशिष्ट नामों, तारीखों और अद्वितीय विवरणों से बचते हैं।
3. "सेफ्टी फिल्टर" का प्रभाव
रोबोट क्यों बदले? शोध पत्र सुझाव देता है कि यह इंस्ट्रक्शन ट्यूनिंग के कारण हुआ।
कल्पना कीजिए कि पुराने रोबोट बेखौफ चित्रकार थे जो हर जगह पेंट फेंक देते थे। नए रोबटेज वे चित्रकार हैं जिन्हें कहा गया है, "गलतियाँ न करें, गलत जानकारी (hallucinate) न दें, और तथ्यों पर टिके रहें।"
इन नियमों का पालन करने के लिए, नए AI मॉडलों ने सुरक्षित खेलना शुरू कर दिया।
- उन्होंने विशिष्ट नामों (जैसे "वॉशिंगटन" या "सेनेटर बेन कार्डिन") का उपयोग करना बंद कर दिया क्योंकि वे तथ्यों को गलत नहीं करना चाहते थे।
- उन्होंने जटिल वाक्य संरचनाओं का उपयोग करना बंद कर दिया जो जोखिम भरी हो सकती हैं।
- इसके बजाय, वे लंबे, सुरक्षित और दोहराव वाले वाक्यों का उपयोग करने लगे जो समझने में आसान हैं लेकिन जिनमें मानवीय लेखन जैसी "चमक" की कमी है।
4. "पढ़ने में आसान" का विरोधाभास
यहाँ एक अजीब मोड़ है: नए AI मॉडल मनुष्यों की तुलना में लंबे वाक्य लिखते हैं, लेकिन वे वाक्य कंप्यूटर द्वारा विश्लेषण करने के लिए आसान होते हैं।
- उपमा: कल्पना कीजिए कि एक मानव लेखक छिपे हुए दरवाजों और गुप्त रास्तों वाला एक जटिल, घुमावदार महल बना रहा है। यह सुंदर है, लेकिन इसका नक्शा बनाना कठिन है।
- नया AI एक बहुत लंबा, सीधा गलियारा बनाता है जिसमें कोई दरवाजा नहीं है। यह मानव के महल से लंबा है, लेकिन यह बहुत आसान है क्योंकि यह बहुत अनुमानित (predictable) है।
शोधकर्ताओं ने पाया कि नया AI टेक्स्ट इतना नियमित और फॉर्मूला आधारित है कि एक कंप्यूटर ग्रामर चेकर इसे लगभग पूरी तरह से (99% सफलता के साथ) प्रोसेस कर सकता है, जबकि मानव लेखन थोड़ा अराजक और समझने में कठिन (94-95% सफलता) होता है।
5. निष्कर्ष
शोध पत्र निष्कर्ष निकालता है कि हालांकि नए AI मॉडल निर्देशों का पालन करने और "सहायक" लगने में बेहतर हैं, लेकिन उन्होंने रचनात्मकता और विविधता के बदले सुरक्षा और पूर्वानुमान को चुना है।
वे अब केवल "औसत" लेखक नहीं हैं; वे "सुरक्षित" लेखक बन रहे हैं। उन्होंने अपनी अभिव्यक्ति की सीमा को इतना सीमित कर लिया है कि वे अब मानव पत्रकारों और पुराने, कम प्रशिक्षित AI मॉडलों दोनों की तुलना में कम विविध हैं।
संक्षेप में: रोबोट नियमों का पालन करने में बेहतर हो गए, लेकिन ऐसा करने में, वे दिलचस्प होना भूल गए।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।