← नवीनतम पेपर
💰 quantitative finance

Data-Driven Merton's Strategies via Policy Randomization

यह शोध पत्र एक निरंतर-समय सुदृढीकरण शिक्षण (रीइन्फोर्समेंट लर्निंग) ढांचे के भीतर नीति यादृच्छिकरण (पॉलिसी रैंडमाइजेशन) को पेश करते हुए, अज्ञात प्रिमिटिव्स वाले एक अपूर्ण बाजार में मर्頓 की अपेक्षित उपयोगिता अधिकतमकरण समस्या को हल करने के लिए एक डेटा-संचालित दृष्टिकोण प्रस्तावित करता है, जो स्पष्ट मॉडल अनुमान की आवश्यकता के बिना एक्टर-क्रिटिक एल्गोरिदम के माध्यम से इष्टतम रणनीतियों के व्युत्पन्न होने में सक्षम बनाता है।

मूल लेखक: Min Dai, Yuchao Dong, Yanwei Jia, Xun Yu Zhou

प्रकाशित 2026-02-17
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Min Dai, Yuchao Dong, Yanwei Jia, Xun Yu Zhou

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक निवेशक हैं जो यह तय करने की कोशिश कर रहे हैं कि आपको अपना कितना पैसा शेयर बाजार में लगाना चाहिए और कितना सुरक्षित बचत खाते में रखना चाहिए। यह वित्त (finance) की एक क्लासिक समस्या है जिसे मर्टन की समस्या (Merton's Problem) के रूप में जाना जाता है।

पारंपरिक रूप से, इस समस्या को हल करना एक जहाज को धुंधले समुद्र में नेविगेट करने जैसा है जिसके लिए आपको खुद एक नक्शा बनाना पड़ता है। पहले आपको लहरों, हवा और धाराओं (जैसे अपेक्षित रिटर्न और अस्थिरता जैसे बाजार मापदंडों का अनुमान लगाने) का अध्ययन करने में वर्षों बिताने होंगे ताकि एक सटीक नक्शा बनाया जा सके। उसके बाद ही आप अपना रास्ता तय कर सकते हैं।

पुराने तरीके के साथ समस्या:
दिक्कत यह है कि वित्तीय बाजार बहुत अव्यवस्थित होते हैं। "नक्शा" अक्सर गलत होता है क्योंकि:

  1. डेटा की कमी है: आपके पास पर्याप्त इतिहास नहीं है कि आप ठीक से जान सकें कि कल हवा कैसे चलेगी।
  2. दुनिया बदलती रहती है: बाजार स्थिर नहीं है; यह नॉन-स्टेशनरी (non-stationary) है। जो पिछले साल काम आया, वह इस साल विफल हो सकता है।
  3. संवेदनशीलता: यदि आपका नक्शा थोड़ा भी गलत है, तो आपका रास्ता सीधे चट्टानों से टकरा सकता है। "अपेक्षित रिटर्न" (expected return) का अनुमान लगाने में एक छोटी सी त्रुटि भी एक विनाशकारी निवेश रणनीति की ओर ले जा सकती है।

नया दृष्टिकोण: "पॉलिसी रैंडमाइजेशन" (पेपर का बड़ा विचार)
यह पेपर रीइन्फोर्समेंट लर्निंग (RL), जो आर्टिफिशियल इंटेलिजेंस का एक प्रकार है, का उपयोग करके इस समस्या को हल करने का एक क्रांतिकारी नया तरीका प्रस्तावित करता है। लेकिन यहाँ एक मोड़ है: आमतौर पर, RL का उपयोग अज्ञात वातावरणों को खोजने (जैसे एक रोबोट जो दरवाजे तक पहुँचने के लिए अलग-अलग रास्तों को आज़माता है) के लिए किया जाता है। वित्त में, चूंकि आप वास्तव में जोखिम भरा पोर्टफोलियो बिना पैसा खोए "आज़मा" नहीं सकते, इसलिए अन्वेषण (exploration) अनावश्यक लगा।

हालाँकि, लेखकों ने एक चतुर तरकीब खोजी। उन्होंने पॉलिसी रैंडमाइजेशन (Policy Randomization) पेश किया।

रचनात्मक उपमा: "आंखों पर पट्टी बांधा हुआ शेफ" बनाम "मास्टर शेफ"

पुराना तरीका (रेसिपी बुक के साथ मास्टर शेफ):
कल्पना कीजिए कि एक शेफ एक बेहतरीन सूप बनाना चाहता है। वे पहले दुनिया के हर एक घटक (ingredient) को मापने में 10 साल बिताते हैं (मॉडल का अनुमान लगाते हैं)। वे एक सटीक रेसिपी लिखते हैं: "ठीक 3.14 ग्राम नमक डालें।" यदि उनके नमक के माप में थोड़ी सी भी चूक हुई, तो सूप का स्वाद खराब हो जाएगा। वे अपनी रेसिपी के साथ फंस जाते हैं।

नया तरीका (जादुई शेकर के साथ आंखों पर पट्टी बांधा हुआ शेफ):
अब, कल्पना कीजिए कि एक शेफ जिसे सटीक रेसिपी तो नहीं पता, लेकिन उसके पास एक "जादुई शेकर" (Magic Shaker) है जो सामग्री में थोड़ा सा रैंडमनेस (यादृच्छिकता) जोड़ देता है।

  1. रैंडमनेस (Randomness): ठीक 3 ग्राम नमक डालने के बजाय, शेफ कंटेनर को हिलाता है, जिससे एक रैंडम मात्रा जुड़ जाती है जो 3 ग्राम के आसपास केंद्रित होती है (जैसे कभी 2.8g, कभी 3.2g)।
  2. सीखना (Learning): शेफ सूप चखता है। यदि यह बहुत नमकीन है, तो वे अपने हिलाने के केंद्र (center) को समायोजित करते हैं। यदि यह बहुत फीका है, तो वे दूसरी तरफ समायोजन करते हैं।
  3. जादू: पेपर एक आश्चर्यजनक गणितीय तथ्य सिद्ध करता है: यदि आप नमक को पर्याप्त रूप से रैंडम तरीके से हिलाते हैं, तो आप वास्तव में जो औसत मात्रा उपयोग करते हैं, वह मूल रेसिपी के लिए बिल्कुल सटीक मात्रा होती है।

नमक की रैंडम मात्रा के साथ "एक्सप्लोर" करने की अनुमति देकर, वे बिना यह जाने कि नमक या पानी के सटीक रासायनिक गुण क्या हैं, एकदम सही रेसिपी सीख सकते हैं। वे मापने के बजाय करके सीखते हैं।

यह वास्तविक दुनिया में कैसे काम करता है

  1. "तापमान" (Temperature - रैंडमनेस): लेखक "तापमान" नामक एक पैरामीटर का उपयोग करते हैं (जिसे λ\lambda द्वारा दर्शाया गया है)।

    • उच्च तापमान (High Temperature): शेफ नमक को बेतहाशा हिलाता है। यह डेटा में बहुत अधिक "शोर" (noise) पैदा करता है, जो एल्गोरिदम को तेजी से सीखने में मदद करता है लेकिन तत्काल परिणाम को अव्यवस्थित बनाता है।
    • कम तापमान (Low Temperature): शेफ बहुत सटीक है। परिणाम साफ होते हैं, लेकिन एल्गोरिदम धीरे सीखता है और किसी स्थानीय जाल (local trap) में फंस सकता है।
    • सही संतुलन (The Sweet Spot): पेपर एक आदर्श संतुलन पाता है। यह स्पष्ट है कि यह रैंडमनेस केवल "एक्सप्लोरिंग" के लिए नहीं है; यह सीखने की प्रक्रिया को स्थिर करने के लिए एक तकनीकी उपकरण है। बिना रैंडमनेस के, गणित विफल हो जाता है क्योंकि संकेत इतने कमजोर हो जाते हैं कि उनसे सीखना असंभव हो जाता है।
  2. एक्टर-क्रिटिक एल्गोरिदम (Actor-Critic Algorithm):

    • एक्टर (The Actor): वह शेफ जो तय करता है कि कितना नमक डालना है (निवेश रणनीति)।
    • क्रिटिक (The Critic): वह चखने वाला जो सूप का न्याय करता है (वैल्यू फंक्शन)।
    • वे मिलकर काम करते हैं। क्रिटिक एक्टर को बताता है, "यह बहुत नमकीन था," और एक्टर अपने रैंडम शेकिंग के केंद्र को समायोजित करता है।

यह क्यों मायने रखता है (परिणाम)

लेखकों ने इस पद्धति का दो तरीकों से परीक्षण किया:

  1. सिमुलेशन (Simulations): उन्होंने नकली बाजार डेटा बनाया। नया तरीका पुराने "नक्शा बनाने वाले" तरीके को लगातार पीछे छोड़ देता है। भले ही डेटा शोर भरा था (जैसे धुंधले दिन में), RL विधि सुचारू रूप से चलती रही, जबकि पुराना तरीका दुर्घटनाग्रस्त हो गया।
  2. वास्तविक बाजार डेटा: उन्होंने 1990 से 2025 तक के वास्तविक डेटा का उपयोग करके S&P 500 (अमेरिकी शेयर बाजार) पर इसे लागू किया।
    • परिणाम: RL रणनीतियों ने कम जोखिम के साथ अधिक पैसा कमाया।
    • "बेयर मार्केट" टेस्ट: वित्तीय संकट (2008) और डॉट-कॉम बबल फटने के दौरान, पुराने तरीके (जो पिछले डेटा पर निर्भर थे) स्टॉक खरीदते रहे क्योंकि उनके "नक्शे" ने कहा था कि यह सुरक्षित है। हालाँकि, RL विधि ने वास्तविक समय में खतरे को भांप लिया और पीछे हट गई, जिससे निवेशक के पैसे की रक्षा हुई।
    • रिकवरी: जब बाजार वापस उछला, तो RL विधि अन्य सभी की तुलना में तेजी से बाजार में वापस आ गई।

मुख्य निष्कर्ष (The Bottom Line)

यह पेपर एक लंबे समय से चले आ रहे रहस्य को सुलझाता है: वित्त में रैंडमाइजेशन का उपयोग क्यों करें यदि आप वास्तव में बाजार को "एक्सप्लोर" नहीं कर सकते?

उत्तर यह है: रैंडमाइजेशन अन्वेषण (exploration) के लिए नहीं है; यह स्थिरता (stability) के लिए है।

ठीक जैसे एक अंधे शेफ को सटीक औसत खोजने के लिए नमक को रैंडम तरीके से हिलाने की आवश्यकता होती है, वैसे ही एक निवेशक को एक आदर्श निवेश योजना खोजने के लिए रैंडमाइज्ड रणनीतियों का उपयोग करने की आवश्यकता होती है। यह उन्हें भविष्य की सटीक भविष्यवाणी करने के असंभव कार्य से बचने और इसके बजाय सीधे डेटा से सर्वोत्तम रणनीति सीखने और बाजार बदलने पर तुरंत अनुकूलित होने की अनुमति देता है।

यह "खेल के नियमों का अनुमान लगाने" से बदलकर "गलतियों और सुधारों के माध्यम से खेल को पूरी तरह से खेलना सीखने" की ओर एक बदलाव है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →