Can Humans Detect AI? Mining Textual Signals of AI-Assisted Writing Under Varying Scrutiny Conditions
यह अध्ययन प्रदर्शित करता है कि जहाँ मानव निर्णायक, पहचान के खतरे के तहत तैयार किए गए एआई-सहायता प्राप्त लेखन और बिना ऐसी किसी चेतावनी के तैयार किए गए लेखन के बीच महत्वपूर्ण अंतर कर सकते हैं, वहीं पारंपरिक कम्प्यूटेशनल पाठ संबंधी विशेषताएं उन सूक्ष्म संकेतों को पकड़ने में विफल रहती हैं जो मनुष्यों को यह भेद करने की अनुमति देते हैं।
मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें
"इनविजिबल इंक" (अदृश्य स्याही) प्रयोग: क्या हम एक AI घोस्टराइटर को पहचान सकते हैं?
कल्पना कीजिए कि आप निबंधों को ग्रेड देने वाले एक शिक्षक हैं। आपके पास दो छात्र हैं, एलेक्स और सैम। दोनों ने अपने पेपर लिखने में एक AI सहायक का उपयोग किया। नग्न आंखों से देखने पर, दोनों निबंध एक जैसे दिखते हैं: शब्दावली समान है, वाक्यों की लंबाई एक जैसी है, और दोनों ने एक ही तथ्यों का उपयोग किया है।
लेकिन एक पेच है: एलेक्स जानता था कि उसे एक हाई-टेक "AI डिटेक्टर" द्वारा देखा जा रहा है, जबकि सैम को इस बारे में कोई जानकारी नहीं थी।
डैनियल ताबाच नामक एक शोधकर्ता ने यह देखने के लिए एक अध्ययन किया कि क्या यह सरल ज्ञान—पकड़े जाने का "खतरा"—लोगों के लिखने के तरीके को बदल देता है, और क्या इंसान उस बदलाव को महसूस कर सकते हैं जब कंप्यूटर नहीं कर पाते।
सेटअप: लेखकों के दो प्रकार
अध्ययन ने लोगों को दो समूहों में विभाजित किया:
- "चिल" ग्रुप (कंट्रोल): उन्हें एक AI चैटबॉट दिया गया और एक विचार (opinion piece) लिखने के लिए कहा गया। उन्हें कॉपी-पेस्ट करने या AI का उपयोग करने के लिए पूरी स्वतंत्रता दी गई।
- "माइक्रोस्कोप के नीचे" ग्रुप (ट्रीटमेंट): उन्हें वही चैटबॉट दिया गया, लेकिन एक चमकीली पीली चेतावनी के साथ: "सावधान! एक AI डिटेक्टर इस निबंध को स्कैन करने जा रहा है।"
लक्ष्य: क्या "माइक्रोस्कोप के नीचे" वाला समूह फ्लैग होने से बचने के लिए "इंसान जैसा दिखने" की अधिक कोशिश करेगा?
रहस्य: "मशीन में भूत" (The Ghost in the Machine)
यहाँ अध्ययन अजीब हो जाता है। शोधकर्ता ने इन निबंधों को हर उपलब्ध "डिजिटल आवर्धक लेंस" (digital magnifying glass) का उपयोग करके देखा—ऐसे उपकरण जो शब्द विविधता, वाक्य की लय और इस बात को मापते हैं कि कितना टेक्स्ट AI से कॉपी-पेस्ट किया गया है।
परिणाम? निबंध बिल्कुल एक जैसे थे।
कागज पर, "माइक्रोस्कोप के नीचे" वाले समूह ने अपनी शैली में कोई बदलाव नहीं किया। उन्होंने अभी भी AI के बड़े हिस्से को कॉपी-पेस्ट किया, और उनके वाक्य की संरचना पहले समूह की तरह ही उतनी ही "रोबोटिक" थी। यदि आप इन निबंधों को किसी कंप्यूटर प्रोग्राम के माध्यम से चलाते, तो कंप्यूटर कहता, "ये दोनों ही AI-सहायता प्राप्त हैं। यहाँ कोई अंतर नहीं है।"
लेकिन फिर, इंसानों ने हस्तक्षेप किया।
शोधकर्ता ने ये निबंध 251 जजों के एक पैनल को दिखाए और एक सरल प्रश्न पूछा: "कौन सा निबंध ऐसा लगता है जैसे इसे एक इंसान ने लिखा है?"
भले ही कंप्यूटर अंतर नहीं देख सका, लेकिन इंसान देख सकते थे। जजों ने "माइक्रोस्कोप के नीचे" वाले समूह के निबंधों को अन्य समूह की तुलना में काफी अधिक बार "मानवीय" के रूप में चुना।
उपमा: "पॉलिश किए गए दर्पण" का प्रभाव (The Polished Mirror Effect)
इसे इस तरह सोचिए:
कल्पना कीजिए कि दो लोग खिड़की साफ कर रहे हैं।
- पहला व्यक्ति ("चिल" ग्रुप) बस इसे जल्दी से पोंछ देता है। वे कुछ निशान और धब्बे छोड़ देते हैं क्योंकि उन्हें परवाह नहीं है।
- दूसरा व्यक्ति ("माइक्रोस्चोप के नीचे" वाला ग्रुप) जानता है कि एक पेशेवर निरीक्षक आने वाला है। वे जरूरी नहीं कि अलग साबुन या अलग कपड़ा इस्तेमाल करें (टेक्स्ट के फीचर्स वही रहते हैं), लेकिन वे थोड़ा अलग तरीके से रगड़ते हैं। वे शायद कोनों पर अधिक समय बिताते हैं या कपड़े को अधिक सचेत तरीके से चलाते हैं।
एक मशीन के लिए जो साबुन की मात्रा को मापती है, दोनों खिड़कियां एक जैसी दिखती हैं। लेकिन कांच के माध्यम से देखने वाली मानवीय आंख के लिए, दूसरी खिड़की अधिक "साफ" या "स्वाभाविक" महसूस होती है।
इसका वास्तव में क्या अर्थ है?
यह अध्ययन लेखन के "वाइब" (vibe) के बारे में कुछ गहरा सुझाव देता है:
- "मानवीय" संकेत सूक्ष्म है: जब हमें पता होता है कि हमें देखा जा रहा है, तो हम केवल यह नहीं बदलते कि हम क्या कहते; हम अपने टूल्स के साथ बातचीत करने के तरीके की ऊर्जा को भी बदलते हैं। "चेतावनी दिए गए" लेखकों ने AI के साथ अधिक चैट करने, विचारों को बार-बार बदलने और सुधारने (iterating/tweaking) में अधिक समय बिताया।
- इंसान "फीचर-काउंटर्स" से बेहतर हैं: वर्तमान AI डिटेक्टर गणितीय पैटर्न (जैसे कि आप कितनी बार "the" शब्द का उपयोग करते हैं) की तलाश करते हैं। लेकिन इंसान कुछ गहरा महसूस कर रहे हैं—शायद इरादे की भावना, एक विशिष्ट लय, या जिस तरह से विचारों को व्यवस्थित किया गया है उसमें एक "आत्मा"—जिसे गणित ने अभी तक मापना नहीं सीखा है।
निष्कर्ष: भले ही आप अपना निबंध लिखने के लिए AI का उपयोग कर रहे हों, यदि आपको पता है कि आपको देखा जा रहा है, तो आप अवचेतन रूप से एक ऐसा "मानवीय पदचिह्न" (human fingerprint) छोड़ सकते हैं जिसे कंप्यूटर मिस कर देगा, लेकिन एक व्यक्ति महसूस कर सकता है।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।