Bridge-RAG: An Abstract Bridge Tree Based Retrieval Augmented Generation Algorithm With Cuckoo Filter
ब्रिज-आरएजी (Bridge-RAG) एक नवीन रिट्रीवल-ऑगमेंटेड जनरेशन फ्रेमवर्क है जो बेहतर सिमेंटिक सटीकता के लिए एक एब्स्ट्रैक्ट ब्रिज ट्री संरचना का उपयोग करके और ब्लॉक लिंक्ड लिस्ट के साथ एक अनुकूलित कुकू फिल्टर (Cuckoo Filter) के माध्यम से एलएलएम (LLM) के प्रदर्शन को बढ़ाता है, जिससे मौजूदा विधियों की तुलना में 15.65% सटीकता वृद्धि और 10 गुना से 500 गुना तक की गति वृद्धि प्राप्त होती है।
मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें
कल्पना कीजिए कि आप एक प्रतिभाशाली लेकिन थोड़े परेशान पुस्तकालयाध्यक्ष (एक Large Language Model) हैं, जो एक आगंतुक के जटिल प्रश्न का उत्तर देने की कोशिश कर रहे हैं। आपके पास लाखों किताबों वाला एक पुस्तकालय है, लेकिन वे सभी फर्श पर एक अराजक ढेर के रूप में बिखरी हुई हैं।
पुराने तरीके के काम करने का ढंग (Standard RAG) ऐसा है जैसे फर्श पर एक जाल फेंकना ताकि कुछ यादृच्छिक (random) पन्ने पकड़े जा सकें जो दिखने में समान लगें। कभी-कभी आप सही पन्ने पकड़ लेते हैं, लेकिन अक्सर आप ऐसे पन्ने पकड़ लेते हैं जो उसी विषय के बारे में तो होते हैं लेकिन उस विशिष्ट विवरण के लिए पूरी तरह से अप्रासंगिक होते जिसकी आपको आवश्यकता है। इसके अलावा, पूरे ढेर को खोजने में बहुत समय लगता है।
Bridge-RAG एक बिल्कुल नया, सुपर-स्मार्ट सिस्टम है जिसे दो बड़े संकटों को ठीक करने के लिए डिज़ाइन किया गया है: सटीकता (Accuracy) (सही जानकारी प्राप्त करना) और गति (Speed) (इसे तेज़ी से प्राप्त करना)। यह कैसे काम करता है, इसके सरल उपमाओं (analogies) का उपयोग करते हुए यहाँ बताया गया है:
1. "एब्स्ट्रैक्ट ट्री" (व्यवस्थित बुकशेल्फ़)
किताबों को ढेर में छोड़ने के बजाय, Bridge-RAG एक पदानुक्रमित वृक्ष (hierarchical tree) बनाता है (विचारों के लिए एक फैमिली ट्री की तरह)।
- द चंक्स (The Chunks): कल्पना करें कि किताब के हर 5 पन्नों को एक छोटे "मिनी-अध्याय" के रूप में आपस में चिपका दिया गया है।
- द एब्स्ट्रैक्ट्स (The Abstracts): सिस्टम उन 5 पन्नों को पढ़ता है और एक स्टिकी नोट पर एक सारांश (Summary) लिखता है (एक "Abstract")।
- द ट्री (The Tree): इन स्टिकी नोट्स को एक पेड़ में व्यवस्थित किया जाता है।
- पेड़ का शीर्ष: बहुत सामान्य सारांश (जैसे, "चिकित्सा")।
- मध्य: विशिष्ट विषय (जैसे, "कार्डियोलॉजी")।
- निचला हिस्सा: विवरणों के साथ वास्तविक मिनी-अध्याय।
यह क्यों मदद करता है: जब आप कोई प्रश्न पूछते हैं, तो सिस्टम केवल यादृच्छिक पन्नों की तलाश नहीं करता। यह पहले सही "स्टिकी नोट" (Abstract) को ढूंढता है, फिर वह उसके पैरेंट नोट्स (बड़ी तस्वीर) और चाइल्ड नोट्स (बारीक विवरण) को देखता है। यह सुनिश्चित करता है कि उत्तर में बड़ा संदर्भ (big context) और विशिष्ट तथ्य दोनों हों, जिससे यह बहुत अधिक सटीक हो जाता है।
2. "कुक्कू फ़िल्टर" (जादुई इंडेक्स कार्ड)
एक विशाल पेड़ में सही स्टिकी नोट ढूंढना पहले धीमा होता था। आपको हर शाखा की जाँच करने के लिए गलियारों में ऊपर-नीचे घूमना पड़ता था।
Bridge-RAG एक कुक्कू फ़िल्टर (Cuckoo Filter) पेश करता है, जो एक जादुई इंडेक्स कार्ड या एक सुपर-फास्ट GPS की तरह कार्य करता है।
- यह कैसे काम करता है: पेड़ के माध्यम से चलने के बजाय, आप GPS से पूछते हैं: "'हार्ट अटैक' के लिए स्टिकी नोट कहाँ है?"
- परिणाम: GPS तुरंत आपको एक ही चरण में सटीक स्थान की ओर इशारा करता है (गणितीय रूप से इसे समय कहा जाता है)। यह एक ही बार में सही शेल्फ तक टेलीपोर्ट करने जैसा है, न कि वहां तक चलकर जाने जैसा।
3. "ब्लॉक लिंक्ड लिस्ट" (कुशल बुक कार्ट)
एक बार जब GPS आपको बताता है कि स्टिकी नोट कहाँ है, तो आपको वास्तविक पन्ने उठाने होते हैं।
- समस्या: पुराने सिस्टम में, प्रत्येक पन्ने का पता अलग-अलग कागजों पर लिखा होता था, जो हर जगह बिखरे होते थे।
- Bridge-RAG का समाधान: वे एक ब्लॉक लिंक्ड लिस्ट (Block Linked List) का उपयोग करते हैं। कल्पना करें कि एक छोटा कार्ट है जो एक बार में तीन पते रखता है। जब आप कार्ट खींचते हैं, तो आपको एक बार में तीन स्थान मिलते हैं। यह स्थान बचाने में मदद करता है और लाइब्रेरियन के काम को बहुत तेज़ बनाता है क्योंकि उन्हें बार-बार इधर-उधर नहीं दौड़ना पड़ता।
4. "तापमान" प्रणाली (लोकप्रिय बुकशेल्फ़)
कुछ विषयों के बारे में बार-बार पूछा जाता है (जैसे "कॉफी कैसे बनाएं"), जबकि कुछ दुर्लभ होते हैं (जैसे "14वीं शताब्दी के चम्मचों का इतिहास")।
- पुराना तरीका: लाइब्रेरियन उन दुर्लभ विषयों के लिए पहले खोज करता है, भले ही वे शायद ही कभी पूछे जाते हों।
- Bridge-RAG का समाधान: वे एक "तापमान" (Temperature) प्रणाली का उपयोग करते हैं। हर बार जब किसी विषय के बारे में पूछा जाता है, तो वह "गर्म" होता जाता है।
- गर्म विषय (High temperature) को लाइन के सामने ले जाया जाता है।
- ठंडे विषय (Cold topics) को पीछे धकेल दिया जाता है।
- इसका मतलब है कि सबसे आम प्रश्नों का उत्तर लगभग तुरंत मिल जाता है क्योंकि लाइब्रेरियन पहले से ही वहीं देख रहा होता है।
भव्य परिणाम
इन तीनों को जोड़कर:
- द ट्री (The Tree): ज्ञान को व्यवस्थित करता है ताकि उत्तर का अर्थ समझ आए।
- द मैजिक GPS (The Magic GPS): सही स्थान को तुरंत ढूंढ लेता है।
- द हॉट/कोल्ड सॉर्टिंग (The Hot/Cold Sorting): उन चीज़ों को प्राथमिकता देता है जिनके बारे में वास्तव में पूछा जाता है।
Bridge-RAG दो अद्भुत चीजें हासिल करता है:
- यह पिछले सिस्टमों की तुलना में 10 गुना से 500 गुना तेज़ है। (कल्पना करें कि कॉफी ब्रेक के इंतज़ार के बजाय पलक झपकते ही उत्तर मिल जाना)।
- यह लगभग 15% अधिक सटीक है। (उत्तर अधिक स्मार्ट होते हैं और भ्रमित होने की संभावना कम होती है)।
संक्षेप में, Bridge-RAG एक अराजक पुस्तकालय को एक अत्यधिक व्यवस्थित, सुपर-फास्ट और बुद्धिमान सूचना केंद्र में बदल देता है जो जानता है कि कहाँ देखना है और किसे प्राथमिकता देनी है।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।