Fin-Analyst at FinMMEval 2026 Task 3: A Live Hybrid Trading Agent with LLM Specialists and Rule-Based Signals
फिन-एनालिस्ट (Fin-Analyst), जिसमें टेस्ला के लिए आठ-विशेषज्ञों वाले एलएलएम (LLM) पाइपलाइन और बिटकॉइन के लिए एक नियम-आधारित सिग्नल सिस्टम वाला एक हाइब्रिड ट्रेडिंग एजेंट शामिल है, ने 13.51% रिटर्न के साथ फिनएमएमइवल (FinMMEval) 2026 टास्क 3 लीडरबोर्ड पर शीर्ष रैंकिंग हासिल की, जो मेमोरीलेस मॉडल्स और फिक्स्ड थ्रेशोल्ड्स की तुलना में इवेंट-ड्रिवन एलएलएम विश्लेषण की श्रेष्ठता को प्रदर्शित करता है और अल्पकालिक लाइव ट्रेडिंग मूल्यांकनों की अस्थिरता संवेदनशीलता को उजागर करता है।
मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें
कल्पना कीजिए कि आप एक अराजक डिजिटल बाज़ार में एक छोटी, हाई-स्पीड ट्रेडिंग शॉप चला रहे हैं। आपके पास दो ग्राहक हैं: एक है टेस्ला (TSLA), जिसका शेयर एक रोलरकोस्टर की तरह ऊपर-नीचे होता है, और दूसरा है बिटकॉइन (BTC), जो एक पेंडुलम की तरह झूलता है। आपका लक्ष्य क्या है? यह अनुमान लगाना कि वे कल ऊपर जाएंगे या नीचे और मुनाफा कमाना।
यहाँ प्रवेश होता है फिन-एनालिस्ट (Fin-Analyst) का, जो एक नया रोबोट ट्रेडर है जिसे FinMMEval 2026 नामक एक लाइव प्रतियोगिता के लिए बनाया गया है। केवल एक दिमाग होने के बजाय, फिन-एनालिस्ट विशेषज्ञों की एक टीम है जो मिलकर काम करती है, लेकिन यह अपने दो ग्राहकों के साथ बहुत अलग व्यवहार करता है।
दो-स्तरीय टीम (The Two-Tiered Team)
टेस्ला के लिए (द एलएलएम स्क्वाड - The LLM Squad):
टेस्ला को एक ऐसे सेलिब्रिटी की तरह समझें जो लगातार खबरों में रहता है। इसकी अगली चाल की भविष्यवाणी करने के लिए, फिन-एनालिस्ट आठ अलग-अलग विशेषज्ञों को काम पर रखता है, जिनमें से प्रत्येक का एक विशिष्ट कार्य है:
- न्यूज़ जंकी (The News Junkie): आज की सुर्खियां पढ़ता है।
- लीगल ईगल (The Legal Eagle): आधिकारिक सरकारी फाइलिंग (जैसे 8-K, 10-Q और 10-K फॉर्म) को स्कैन करता है।
- अकाउंटेंट (The Accountant): कंपनी के वित्तीय स्वास्थ्य की जांच करता है।
- वॉल स्ट्रीट वॉचर (The Wall Street Watcher): पढ़ता है कि अन्य विश्लेषक क्या भविष्यवाणी कर रहे हैं।
- टेक गुरु (The Tech Guru): चार्ट और तकनीकी पैटर्न को देखता है।
- सोशल बटरफ्लाई (The Social Butterfly): पढ़ता है कि लोग सोशल मीडिया पर क्या चिल्ला रहे हैं।
- इवेंट ट्रैकर (The Event Tracker): अचानक होने वाली, कीमत-संवेदनशील घोषणाओं पर नज़र रखता है।
- क्वार्टरली रिपोर्टर (The Quarterly Reporter): मौसमी वित्तीय रिपोर्टों पर ध्यान केंद्रित करता है।
इन सभी आठ विशेषज्ञों की बातें एक मेटा-एजेंट (टीम कप्तान) से होती हैं। कप्तान सबकी सुनता है, लेकिन यदि आज की खबर बहुत ज़ोरदार और भरोसेमंद है, तो कप्तान अन्य लोगों को अनदेखा कर सकता है और केवल समाचार का अनुसरण कर सकता है। यह पूरी टीम एक लार्ज लैंग्वेज मॉडल (LLM) द्वारा संचालित है, जो एक सुपर-स्मार्ट रोबोट की तरह है जो टेक्स्ट को पढ़ और समझ सकता है।
बिटकॉइन के लिए (द रूल-बेस्ड ट्रायो - The Rule-Based Trio):
बिटकॉइन के साथ अलग व्यवहार किया जाता है। आठ विशेषज्ञों की टीम के बजाय, फिन-एनालिस्ट एक सरल, तीन-सदस्यीय वोटिंग बूथ का उपयोग करता है जिसमें सख्त नियम हैं:
- ट्रेंड स्पॉटर (The Trend Spotter): यह देखता है कि हाल ही में कीमत ऊपर गई या नीचे।
- फियर एंड ग्रीड मीटर (The Fear & Greed Meter): क्रिप्टो के लिए एक प्रसिद्ध "मूड इंडेक्स" को देखता है। यदि लोग "एक्सट्रीम ग्रीड" (अत्यधिक लालच) में हैं, तो रोबोट बेच देता है; यदि वे "एक्सट्रीम फियर" (अत्यधिक डर) में हैं, तो वह खरीदता है।
- मोमेंटम कोच (The Momentum Coach): उस लेबल का पालन करता है जो बताता है कि बाजार बुलिश है या बेयरिश।
यदि दो लोग "खरीदें" (Buy) वोट देते हैं और एक "बेचें" (Sell) कहता है, तो रोबोट खरीदता है। यदि मुकाबला बराबरी का हो, तो "फियर एंड ग्रीड" मीटर फैसला करता है। इस प्रणाली में कोई फैंसी एआई दिमाग नहीं है; यह बस एक चेकलिस्ट का पालन करता है।
लाइव रेस के परिणाम
टीम ने मई से जून 2026 तक एक लाइव, असली पैसे के सिमुलेशन (केवल वीडियो गेम नहीं) में इस प्रणाली का परीक्षण किया। यहाँ क्या हुआ:
- टेस्ला: आठ-विशेषज्ञों वाली टीम ने कमाल कर दिया। उन्होंने +13.51% रिटर्न बनाया, जो "बाय-एंड-होल्ड" रणनीति (जो बस चुपचाप बैठी रहती है) से +28.33 अंक के भारी अंतर से बेहतर था। वे इतने अच्छे थे कि उन्होंने प्रतियोगिता में सभी एजेंटों में से पहला स्थान हासिल किया। उनका "शार्प रेशियो" (एक स्कोर जो बताता है कि उन्होंने अपने इनाम के लिए कितना जोखिम लिया) एक विशाल 4.10 था, और उन्होंने अपने 88% ट्रेड जीते।
- बिटकॉइन: सरल नियम-आधारित टीम ठीक-ठाक थी, लेकिन बहुत शानदार नहीं। वे -5.30% रिटर्न के साथ समाप्त हुए, जो सुनने में बुरा लगता है, लेकिन याद रखें: "बाय-एंड-होल्ड" रणनीति ने उसी समय के दौरान बिटकॉइन के लिए लगभग 26% का नुकसान उठाया था! इसलिए, रोबोट ने वास्तव में अपने मालिक को एक बड़े क्रैश से बचाया, और पैसिव रणनीति से +17.63 अंक आगे रहा। हालाँकि, यह कुल मिलाकर 13वें स्थान पर रहा।
प्लॉट ट्विस्ट (The Plot Twist):
यहाँ पेचीदा हिस्सा है: जब शोधकर्ताओं ने जून की शुरुआत में पहली बार स्कोरबोर्ड की जाँच की, तो बिटकॉइन रोबोट आगे चल रहा था, और टेस्ला टीम मुश्किल से ब्रेक-ईवन (बराबर) पर पहुँच पा रही थी। लेकिन जून के अंत तक, रैंकिंग पूरी तरह से बदल गई। टेस्ला की टीम ने देर से आए उछाल का फायदा उठाया और स्वर्ण पदक जीता, जबकि बिटकॉइन रोबोट की बढ़त फीकी पड़ गई। यह सुझाव देता है कि कम समय वाले, उथल-पुथल भरे बाजारों में, रैंकिंग तेजी से बदल सकती है, और आप केवल एक स्नैपशॉट देखकर यह तय नहीं कर सकते कि वास्तव में सबसे अच्छा कौन है।
क्या काम आया और क्या नहीं
शोधकर्ताओं ने यह देखने के लिए टेस्ला टीम का "सर्जरी" किया कि कौन सा विशेषज्ञ सबसे महत्वपूर्ण था। उन्होंने एक-एक करके प्रत्येक विशेषज्ञ को बंद कर दिया:
- लीगल ईगल (8-K फाइलिंग) एमवीपी (MVP) था। जब उन्होंने इस विशेषज्ञ को हटाया, तो टीम का प्रदर्शन सबसे अधिक गिरा। इससे पता चलता है कि टेस्ला की कीमत को चलाने वाले मुख्य कारक अचानक होने वाली आधिकारिक कंपनी घोषणाएं हैं।
- क्वार्टरली रिपोर्टर (10-K) और अकाउंटेंट ने वास्तव में टीम को थोड़ा नुकसान पहुँचाया। ऐसा लगता है कि हर दिन वार्षिक रिपोर्ट देखना बहुत अधिक शोर पैदा करता है और रोबोट को भ्रमित करता है।
- डेली न्यूज़ भी महत्वपूर्ण था। इसके बिना, टीम संघर्ष करती।
बिटकॉइन के लिए, सरल नियम तब अच्छी तरह काम करते थे जब बाजार गिर रहा था (रोबोट ने जल्दी बेचने का निर्णय लिया), लेकिन वे तब विफल रहे जब बाजार केवल अगल-बगल (sideways) चल रहा था। रोबोट मामूली, रैंडम उतार-चढ़ाव पर बार-बार अपना वोट बदलता रहा, जिससे पैसा गया।
रोबोट की कमजोरियां
भले ही टेस्ला टीम जीत गई, लेकिन लेखकों ने इसकी खामियों के बारे में ईमानदारी से बताया है:
- कोई स्मृति नहीं (No Memory): रोबोट को भूलने की बीमारी है। हर सुबह, वह बिना किसी याद के जागता है कि कल उसने क्या गलतियाँ की थीं। यदि उसने सोमवार को गलत अनुमान लगाया, तो वह मंगलवार को भी गलत अनुमान लगा सकता है, कई दिनों तक एक ही गलती दोहराता रहेगा।
- कठोर नियम (Rigid Rules): बिटकॉइन रोबोट निश्चित संख्याओं का उपयोग करता है (जैसे "यदि कीमत 0.5% गिरती है तो बेचें")। एक पागल बाजार में, ये संख्याएं अनुकूलित नहीं होती हैं, जिससे रोबमा बहुत अधिक रैंडम शोर पर ट्रेड करने लगता है।
- छोटा दिमाग (Small Brain): उन्होंने पैसे बचाने के लिए एक छोटा, सस्ता एआई मॉडल (gpt-4o-mini) इस्तेमाल किया। उन्हें संदेह है कि एक बड़ा, स्मार्ट मॉडल और भी बेहतर कर सकता था।
निष्कर्ष
यह पेपर सुझाव देता है कि समाचार और फाइलिंग पढ़ने के लिए विशेषज्ञों की एक एआई टीम का उपयोग करना टेस्ला जैसे स्टॉक के व्यापार के लिए एक शक्तिशाली तरीका है, खासकर जब आप ब्रेकिंग न्यूज और आधिकारिक फाइलिंग पर ध्यान केंद्रित करते हैं। हालांकि, बिटकॉइन के लिए, सरल नियम आपको बड़े क्रैश से बचा सकते हैं, लेकिन वे शांत बाजारों में संघर्ष करते हैं।
लेखक निष्कर्ष निकालते हैं कि यह तो बस शुरुआत है। और भी बेहतर होने के लिए, भविष्य के रोबोटों को अपनी पिछली गलतियों को याद रखने, बड़े दिमाग का उपयोग करने, और शायद अलग-अलग विशेषज्ञों को निर्णय लेने से पहले आपस में बहस (debate) करने की आवश्यकता होगी। फिलहाल, फिन-एनालिस्ट यह साबित करता है कि एक हाइब्रिड दृष्टिकोण—स्टॉक्स के लिए स्मार्ट एआई और क्रिप्टो के लिए सरल नियमों का मिश्रण—केवल बैठे रहने की तुलना में बेहतर प्रदर्शन कर सकता है, भले ही वह एक छोटे, अस्थिर मुकाबले में हो।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।