Quantum-Projected Semantic Retrieval: A Universal Low-Latency Backbone for Multi-Modal AI Systems
यह शोध पत्र QuantumRAG को प्रस्तुत करता है, जो एक सार्वभौमिक, कम-विलंबता वाला रिट्रीवल सिस्टम है जो टेक्स्ट एम्बेडिंग्स को हिल्बर्ट स्पेस में जटिल क्वांटम अवस्थाओं में मैप करता है ताकि मानक CPU हार्डवेयर पर BERT-स्तर की सटीकता के साथ 3.6× तेज़ इन्फरेंस प्राप्त किया जा सके, जबकि यह टेक्स्ट, गणित और वीडियो जैसी डेटा मोडैलिटीज के प्रति उदासीन बना रहता है।
मूल पेपर CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें
यहाँ "क्वांटम-प्रोजेक्टेड सिमेंटिक रिट्रीवल" (QuantumRAG) पेपर का सरल भाषा और रचनात्मक उपमाओं (analogies) का उपयोग करके किया गया स्पष्टीकरण दिया गया है।
बड़ी समस्या: घास के ढेर में सुई ढूँढना
कल्पना कीजिए कि आप एक लाइब्रेरियन हैं जो किसी ग्राहक के लिए एकदम सही किताब ढूँढने की कोशिश कर रहे हैं। आपके पास लाखों किताबों वाली एक लाइब्रेरी है।
- पुराना तरीका (क्लासिकल सर्च): आप किताबों को देखते हैं और पूछते हैं, "क्या इस किताब में ग्राहक के अनुरोध वाले शब्द हैं?" यदि ग्राहक "कारों" के बारे में पूछता है और किताब में "ऑटोमोबाइल्स" लिखा है, तो एक साधारण शब्द-गणना प्रणाली इसे मिस कर सकती है। यहाँ तक कि अर्थ समझने वाले स्मार्ट सिस्टम भी आमतौर पर केवल दूरी (distance) मापते हैं। वे पूछते हैं, "इस किताब का विचार आपके प्रश्न से कितनी दूर है?"
- सीमा: दूरी काफी नहीं है। दो किताबें आपके प्रश्न से समान दूरी पर हो सकती हैं लेकिन उनके "वाइब" या दृष्टिकोण पूरी तरह से अलग हो सकते हैं। वर्तमान सिस्टम इस अंतर को नहीं देख पाते।
समाधान: QuantumRAG
लेखक, अमित राणा ने QuantumRAG नामक एक नया सिस्टम बनाया है। इसे किसी वास्तविक क्वांटम कंप्यूटर (वह साइंस-फिक्शन वाला जिसमें विशाल कूलिंग टावर होते हैं) की आवश्यकता नहीं है। इसके बजाय, यह एक मानक कंप्यूटर पर चलने के लिए क्वांटम मैकेनिक्स के गणित का उपयोग करता है, लेकिन यह जानकारी को बहुत तेज़ी से और अधिक सटीकता से खोज लेता है।
यह कैसे काम करता है, इसे तीन सरल चरणों में यहाँ समझाया गया है:
1. GPS बनाम कंपास (Encoding)
कल्पना कीजिए कि आपकी लाइब्रेरी का हर दस्तावेज़ एक विशाल मानचित्र पर एक बिंदु है।
- क्लासिकल सिस्टम (कोसाइन सिमिलैरिटी): ये सिस्टम केवल GPS निर्देशांक (coordinates) जानते हैं। वे जानते हैं कि कोई दस्तावेज़ कहाँ स्थित है। यदि दो दस्तावेज़ बिल्कुल एक ही स्थान पर हैं, तो सिस्टम सोचता है कि वे समान हैं।
- QuantumRAG: यह सिस्टम हर दस्तावेज़ में एक कंपास जोड़ देता है। यह न केवल यह जानता है कि दस्तावेज़ कहाँ है, बल्कि यह भी जानता है कि वह किस दिशा में देख रहा है।
- उपमा: कल्पना कीजिए कि पार्क में एक ही स्थान पर खड़े दो लोग हैं। एक उत्तर (भविष्य के बारे में बात कर रहा है) की ओर देख रहा है, और दूसरा दक्षिण (अतीत के बारे में बात कर रहा है) की ओर देख रहा है। एक GPS कहता है कि वे एक ही जगह पर हैं। एक कंपास जानता है कि वे विपरीत दिशाओं में देख रहे हैं।
- QuantumRAG हर दस्तावेज़ को एक "फेज" (एक दिशा) देता है। यह इसे उन दो दस्तावेज़ों के बीच अंतर करने की अनुमति देता है जो दिखने में समान हैं लेकिन जिनका अर्थ अलग है।
2. स्पॉटलाइट (Retrieval)
जब आप कोई प्रश्न पूछते हैं, तो सिस्टम पूरी लाइब्रेरी को एक साथ नहीं देखता। वह बहुत धीमा हो जाएगा।
- ट्रिक: यह "क्वांटम मेजरमेंट" का उपयोग करता है। कल्पना कीजिए कि आपका प्रश्न एक टॉर्च है। पूरे कमरे पर कमजोर रोशनी डालने के बजाय, QuantumRAG अपनी बीम को आपके प्रश्न के 128 सबसे महत्वपूर्ण हिस्सों पर केंद्रित करता है और बाकी को अनदेखा कर देता है।
- इसके बाद यह इस केंद्रित बीम की तुलना दस्तावेज़ों से करता है। क्योंकि यह दस्तावेज़ों की "दिशा" (फेज़) को देख रहा है, इसलिए यह उस दस्तावेज़ को चुन सकता है जो वास्तव में आपके इरादे के अनुरूप है, न कि केवल उसे जो सबसे करीब है।
3. ट्यूनिंग फोर्क (Reranking)
सबसे अच्छे उम्मीदवारों को खोजने के बाद, सिस्टम ग्रोवर एल्गोरिदम (एक प्रसिद्ध क्वांटम सर्च विधि) से प्रेरित तकनीक का उपयोग करता है।
- उपमा: कल्पना कीजिए कि ट्यूनिंग फोर्क्स (tuning forks) से भरा एक कमरा है। अधिकांश शांत हैं। आप एक ऐसा फोर्क बजाते हैं जो आपके प्रश्न की "फ्रीक्वेंसी" से मेल खाता है। सिस्टम उस विशिष्ट फोर्क को और तेज़ करता जाता है, जबकि अन्य धीरे-धीरे शांत हो जाते हैं।
- यह गणितीय रूप से ऐसा करता है ताकि सबसे अच्छा उत्तर सूची में सबसे ऊपर आ जाए। पेपर में उल्लेख किया गया है कि फोर्क को कितनी बार वाइब्रेट करना है, इस गणित को ठीक करना एक बड़ी सफलता थी जिसने सटीकता में काफी सुधार किया।
परिणाम: तेज़ और स्मार्ट
लेखक ने एक कठिन गणितीय बेंचमार्क (MATH डेटासेट) पर 12,500 समस्याओं के साथ इसका परीक्षण किया।
- सटीकता (Accuracy): इसने नंबर 1 उत्तर को सही पाने में सबसे अच्छे मौजूदा सिस्टम्स (BERT-cosine) की बराबरी की।
- रैंकिंग (Ranking): यह बाकी की सूची (स्थान 2 से 10 तक) को क्रमबद्ध करने में थोड़ा बेहतर था। ऐसा इसलिए है क्योंकि "कंपास दिशा" (फेज़) ने इसे बहुत समान दस्तावेज़ों के बीच अंतर करने में मदद की।
- गति (Speed): यह सबसे बड़ी जीत है। यह मानक पद्धति की तुलना में 3.6 गुना तेज़ था।
- मानक पद्धति: ~30 मिलीसेकंड प्रति खोज।
- QuantumRAG: ~8.4 मिलीसेकंड प्रति खोज।
- नोट: पेपर इस बात पर ज़ोर देता है कि यह मानक CPU (सामान्य कंप्यूटर चिप्स) पर चलता है, न कि क्वांटम कंप्यूटरों पर।
यह क्यों महत्वपूर्ण है (पेपर के अनुसार)
पेपर का तर्क है कि यह एक "यूनिवर्सल बैकबोन" है।
- हर चीज़ के लिए एक सिस्टम: चाहे आप गणित की समस्या खोज रहे हों, टेक्स्ट का पैराग्राफ, या वीडियो कैप्शन, यह सिस्टम उन सभी के साथ एक जैसा व्यवहार करता है। यह उन सभी को "क्वांटम स्टेट्स" (दिशा वाले बिंदु) में बदल देता है और उन्हें एक ही स्पेस में खोजता है।
- न्यूरो-सिंबोलिक AI: पेपर का दावा है कि यह "न्यूरल" AI (जो डेटा से सीखता है लेकिन थोड़ा रहस्यमय होता है) और "सिंबोलिक" AI (जो सख्त नियमों का पालन करता है) के बीच के अंतर को पाटता है। न्यूरल डेटा को एक संरचित गणितीय स्थान (हिल्बर्ट स्पेस) में डालकर, यह सिस्टम तेज़, अधिक व्याख्या योग्य और अधिक विश्वसनीय हो जाता है।
एक वाक्य में सारांश
QuantumRAG एक नया सर्च इंजन है जो सामान्य कंप्यूटरों पर चलता है लेकिन क्वांटम भौतिकी के गणित का उपयोग करता है ताकि हर दस्तावेज़ को उसकी स्थिति के साथ-साथ एक "दिशा" भी दी जा सके, जिससे यह वर्तमान तकनीक की तुलना में 3.6 गुना तेज़ी से उत्तर खोजने और उन्हें अधिक सटीकता से रैंक करने में सक्षम होता है।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।