← नवीनतम पेपर
🤖 AI

Simulated Customers Never Walk Away: Decision Fidelity of LLM User Simulators Measured Against Real Purchase Outcomes

यह शोध पत्र "डिसीजन फिडेलिटी" (decision fidelity) को पेश करता है ताकि यह उजागर किया जा सके कि एलएलएम (LLM) यूजर सिम्युलेटर एक व्यवस्थित "डिसएंगेजमेंट डेफिसिट" (disengagement deficit) से ग्रस्त होते हैं, जहाँ वे वास्तविक ग्राहकों की छोड़कर जाने की इच्छा को दोहराने में विफल रहते हैं और इसके बजाय गैर-खरीदारों की खरीदारी करने की रुचि को कृत्रिम रूप से बढ़ा देते हैं, जिससे सेल्स और पर्सुएशन एजेंटों का मूल्यांकन भ्रामक हो जाता है।

मूल लेखक: Liang Chen

प्रकाशित 2026-06-23
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें
CC BY 4.0

मूल लेखक: Liang Chen

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। ✨ नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

यहाँ "Simulated Customers Never Walk Away" (सिम्युलेटेड ग्राहक कभी दूर नहीं जाते) नामक शोध पत्र का सरल भाषा और रोज़मर्रा के उदाहरणों के साथ विवरण दिया गया है।

मुख्य विचार: "विनम्र भूत" (Polite Ghost) की समस्या

कल्पना कीजिए कि आप एक नए सेल्सपर्सन को ट्रेनिंग दे रहे हैं। समय और पैसा बचाने के लिए, असली लोगों को अभ्यास करने के लिए काम पर रखने के बजाय, आप एक बहुत ही स्मार्ट कंप्यूटर प्रोग्राम (एक AI) का उपयोग करते हैं जो ग्राहकों का नाटक करता है।

शोधकर्ताओं ने इस सेटअप में एक बड़ी खामी खोजी है: AI ग्राहक "ना" कहने के लिए बहुत अधिक विनम्र होते हैं।

भले ही AI को एक गुस्सैल या व्यस्त व्यक्ति की तरह व्यवहार करने के लिए कहा जाए, फिर भी वह बातचीत जारी रखता है, कीमत के बारे में पूछता है, और दिलचस्पी दिखाता रहता है। वास्तविक दुनिया में, जब कोई ग्राहक दिलचस्पी खो देता है, तो वे अक्सर जवाब देना बंद कर देते हैं, कहते हैं "मैं व्यस्त हूँ," या बस चले जाते हैं। हालाँकि, AI सिम्युलेटर कभी दूर नहीं जाते।

उपमा: "रिहर्सल" बनाम "असली शो"

मौजूदा तरीके से सेल्स AI को टेस्ट करने के तरीके को एक नाटक की रिहर्सल की तरह समझें:

  • स्क्रिप्ट: रिहर्सल में, ग्राहकों की भूमिका निभाने वाले अभिनेताओं को एक स्क्रिप्ट दी जाती है जिसमें लिखा होता है, "आपको यह टिकट खरीदना ही है।" भले ही वे एक "गुस्सैल" पात्र निभा रहे हों, उन्हें स्क्रिप्ट के अनुसार दृश्य में बने रहने और अंततः टिकट खरीदने के लिए अनिवार्य रूप से बाध्य किया जाता है।
  • परिणाम: सेल्सपर्सन (AI एजेंट) यह सीख जाता है कि यदि वह ज़ोर देता रहे, तो ग्राहक हमेशा रुकता है और सुनता है। उन्हें लगता है कि वे सौदे पक्के करने में माहिर हैं।
  • असली शो: जब सेल्सपर्सन असली लोगों के साथ मंच पर जाता है, तो असली ग्राहक थिएटर के बीच में ही बाहर जा सकते हैं। सेल्सपर्सन हैरान रह जाता है क्योंकि उनकी "रिहर्सल" ने उन्हें कभी यह नहीं सिखाया कि कोई वास्तव में दरवाजे से बाहर कैसे निकल सकता है।

शोधकर्ताओं ने क्या किया

लियांग चेन के नेतृत्व में टीम ने केवल अनुमान नहीं लगाया कि ऐसा हो रहा है; उन्होंने वास्तविक डेटा के साथ इसे सिद्ध किया।

  1. वास्तविक डेटा: उन्होंने अपने बच्चों के लिए मैचमेकिंग सेवाओं को खरीदने की कोशिश कर रहे वास्तविक माता-पिता और एक वास्तविक AI सेल्स एजेंट के बीच 2,790 वास्तविक बातचीत का विश्लेषण किया। वे ठीक से जानते थे कि किसने खरीदा (भुगतान किया) और किसने नहीं।
  2. परीक्षण: उन्होंने वास्तविक बातचीत को यादृच्छिक (random) बिंदुओं पर रोका। उन्होंने एक अलग AI (सिम्युलेटर) से उसी सटीक बिंदु से बातचीत को आगे बढ़ाने के लिए कहा।
  3. तुलना: उन्होंने तुलना की कि वास्तविक इंसान ने आगे क्या किया बनाम AI सिम्युलेटर ने आगे क्या किया।

निष्कर्ष: "डिस्कनेक्ट होने की कमी" (Disengagement Deficit)

परिणामों ने एक विशिष्ट पैटर्न दिखाया जिसे वे "डिस्कनेक्ट होने की कमी" (Disengagement Deficit) कहते हैं।

  • खरीदने वालों के लिए: AI सिम्युलेटर लगभग सटीक थे। यदि कोई वास्तविक व्यक्ति खरीदने वाला था, तो AI सिम्युलेटर बिल्कुल उनकी तरह व्यवहार करता था।
  • जो लोग नहीं खरीद रहे थे: यहीं पर सिस्टम टूट गया।
    • वास्तविक मनुष्य: जब वे दिलचस्पी नहीं रखते थे, तो वे कहते थे जैसे "मैं व्यस्त हूँ," "धन्यवाद नहीं," या बस जवाब देना बंद कर देते थे। वे "डिस्कनेक्ट" हो जाते थे।
    • AI सिम्युलेटर: दूर जाने के बजाय, AI सवाल पूछता रहता था जैसे "इसकी कीमत कितनी है?" या "क्या आप मुझे और बता सकते हैं?" इसने एक "ना" को "शायद" में बदल दिया।

रूपक (Metaphor): कल्पना कीजिए कि एक वास्तविक ग्राहक एक दरवाजा है जो बंद हो जाता है। AI सिम्युलेटर एक ऐसा दरवाजा है जो थोड़ा खुला रह जाता है। आप चाहे जितना भी धक्का दें, AI वाला दरवाजा कभी पूरी तरह बंद नहीं होता; वह बस चरमराहट करता रहता है और अधिक ध्यान आकर्षित करने की कोशिश करता रहता है।

हम इसे सिर्फ एक 'प्रॉम्प्ट' से क्यों ठीक नहीं कर सकते?

शोधकर्ताओं ने एक स्पष्ट समाधान आज़माया: उन्होंने AI सिम्युलेटर को बताया, "आपको अरुचि दिखाने की अनुमति है। आप 'ना' कह सकते हैं, फोन काट सकते हैं, या सेल्सपर्सन को अनदेरा कर सकते हैं।"

  • क्या हुआ? AI ने अधिक बार "ना" कहना शुरू कर दिया, लेकिन उसने यह हर किसी के साथ किया, यहाँ तक कि उन लोगों के साथ भी जो वास्तव में खरीदने वाले थे।
  • समस्या: AI ने सभी के साथ बदतमीजी करना सीख लिया, लेकिन वह यह अंतर नहीं कर सका कि कौन वास्तव में खरीदार है और कौन नहीं। वह यह नहीं सीख सका कि किसे छोड़कर जाना चाहिए।
  • निष्कर्ष: आप AI को यह सिखाने के लिए केवल "प्रॉम्प्ट" नहीं दे सकते कि कब रुकना है। AI को मददगार और सहयोगी होने के लिए प्रशिक्षित किया गया है, इसलिए उसकी डिफ़ॉल्ट सेटिंग बातचीत जारी रखना है। उसमें यह समझने की मानवीय प्रवृत्ति की कमी है कि कब रुकना है।

यह क्यों महत्वपूर्ण है?

यदि आप इन "कभी दूर न जाने वाले" सिम्युलेटरों का उपयोग करके एक सेल्स AI को प्रशिक्षित करते हैं, तो आप उसे वास्तविकता के एक नकली, आसान संस्करण पर प्रशिक्षित कर रहे हैं।

  • जाल: सेल्स AI यह सीख जाता है कि "ज़ोर देना" काम करता है क्योंकि सिम्युलेटर हमेशा रुकता है और सुनता है।
  • वास्तविकता: वास्तविक दुनिया में, किसी ऐसे ग्राहक पर ज़ोर देना जो जाना चाहता है, उसे और तेज़ी से दूर भगा देता है।
  • जोखिम: कंपनियाँ ऐसे सेल्स एजेंट बना सकती हैं जो बहुत आक्रामक और परेशान करने वाले होते हैं क्योंकि उनके "टेस्ट स्कोर" बहुत अच्छे दिखते थे, लेकिन वे वास्तविक लोगों के साथ बुरी तरह विफल हो जाएंगे।

सारांश

यह शोध पत्र तर्क देता है कि हम AI सिम्युलेटरों को इस आधार पर माप रहे हैं कि वे कितनी अच्छी तरह बात करते हैं (कम्युनिकेटिव फिडेलिटी), लेकिन हमें इस आधार पर मापना चाहिए कि वे कितनी अच्छी तरह निर्णय लेते हैं (डिसीजन फिडेलिटी)।

वर्तमान में, हमारे सिम्युलेटर उन अभिनेताओं की तरह हैं जो अपने चरित्र को तोड़ने से इतने डरते हैं कि वे मंच नहीं छोड़ते, भले ही स्क्रिप्ट में लिखा हो कि पात्र को घर जाना चाहिए। जब तक हम इसे ठीक नहीं करते, हम ऐसे सेल्स एजेंट बना रहे हैं जो भूतों से बात करने में तो माहिर हैं, लेकिन वास्तविक लोगों से बात करने में बेहद खराब हैं।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →

इसी तरह के और पेपर

इस विषय के सभी पेपर देखें 🤖 cs.AI →