Self-hosted Lecture-to-Quiz: Local LLM MCQ Generation with Deterministic Quality Control
यह शोध पत्र एक एंड-टू-एंड, सेल्फ-होस्टेड पाइपलाइन प्रस्तुत करता है जो एक स्थानीय LLM और नियत गुणवत्ता नियंत्रण का उपयोग करके लेक्चर PDF को बहुविकल्पीय प्रश्नों में परिवर्तित करता है, जो शैक्षिक उपयोग के लिए एक विस्तृत चेतावनी वर्गीकरण के साथ एक सत्यापित 24-प्रश्नों के डेटासेट को जारी करते हुए गोपनीयता और जवाबदेही सुनिश्चित करता है।
मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें
कल्पना कीजिए कि आप एक शिक्षक हैं जो अपने 50-पेज के लेक्चर PDF को छात्रों के लिए एक मज़ेदार, बहुविकल्पीय (multiple-choice) क्विज़ में बदलना चाहते हैं। आमतौर पर, आप उस टेक्स्ट को किसी शक्तिशाली AI चैटबॉट (जैसे कि क्लाउड-आधारित "जीनियस") में कॉपी-पेस्ट करेंगे और उससे प्रश्न लिखने के लिए कहेंगे। लेकिन इसमें दो बड़ी समस्याएँ हैं:
- गोपनीयता (Privacy): आप अपने निजी, अप्रकाशित लेक्चर नोट्स किसी अजनबी के कंप्यूटर पर भेज रहे हैं।
- विश्वसनीयता (Reliability): AI गलतियाँ कर सकता है, जैसे कि दो सही उत्तर दे देना, या एक ही प्रश्न को दो बार लिख देना, और हो सकता है कि आपको यह तब तक पता न चले जब तक बहुत देर न हो जाए।
यह पेपर एक समाधान प्रस्तुत करता है जिसे L2Q (Lecture-to-Quiz) कहा जाता है। इसे अपने स्वयं के क्लासरूम में (या अपने कंप्यूटर पर) एक निजी, आत्मनिर्भर फैक्ट्री बनाने के रूप में समझें जो ये क्विज़ बनाती है, बिना बाहरी दुनिया से मदद मांगे।
यह प्रक्रिया कैसे काम करती है, इसे कुछ रोज़मर्रा के उपमाओं (analogies) के साथ समझाया गया है:
1. सेटअप: "लोकल फैक्ट्री"
अपने लेक्चर नोट्स को किसी बड़ी टेक कंपनी के क्लाउड पर भेजने के बजाय, आप अपनी खुद की मशीन पर "AI ब्रेन" (एक लोकल LLM) चलाते हैं।
- उपमा: कल्पना कीजिए कि आपके किचन में एक बहुत ही बुद्धिमान, लेकिन थोड़ा विचलित रहने वाला प्रशिक्षु (apprentice) काम कर रहा है। आप उसे अपनी गुप्त पारिवारिक रेसिपी (लेक्चर PDF) देते हैं। वह पूरे समय आपके किचन में ही रहता है। कोई और आपकी रेसिपी नहीं देख पाता।
2. प्रक्रिया: "असेंबली लाइन"
सिस्टम केवल AI को "क्विज़ बनाने" के लिए नहीं कहता। यह एक सख्त, चरण-दर-चरण असेंबली लाइन चलाता है:
- चरण A: योजना (The Plan)। AI लेक्चर को पढ़ता है और कवर किए जाने वाले विषयों की एक छोटी खरीदारी सूची (shopping list) बनाता है।
- चरण B: ड्राफ्टिंग (The Drafting)। AI प्रश्न लिखता है। इसे एक बहुत ही विशिष्ट प्रारूप (जैसे एक सख्त फॉर्म भरना) में लिखने के लिए कहा जाता है, ताकि कंप्यूटर इसे आसानी से पढ़ सके।
- चरण C: "बाउंसर" (गुणवत्ता नियंत्रण/Quality Control)। यह सबसे महत्वपूर्ण हिस्सा है। एक प्रश्न को फैक्ट्री से बाहर जाने की अनुमति मिलने से पहले, वह एक बाउंसर (सख्त कंप्यूटर नियमों का एक सेट) से गुजरता है।
- नियम: "क्या इसमें ठीक 5 विकल्प हैं?"
- नियम: "क्या केवल एक ही सही उत्तर है?"
- नियम: "क्या आपने गलती से एक ही गलत उत्तर दो बार लिख दिया?" (जैसे, विकल्प C और विकल्प E दोनों 5 के बराबर हैं)।
- नका: "यदि उत्तर एक दशमलव (decimal) है, तो क्या आपने छात्र को बताया है कि कितने अंकों तक राउंड करना है?"
3. "रिट्राय" (Retry) तंत्र
यदि बाउंसर कोई गलती पकड़ लेता है, तो AI को केवल चेतावनी नहीं मिलती; उसे तुरंत प्रश्न को दोबारा लिखना होता है।
- उपमा: यह एक ऐसे बेकर की तरह है जिसका केक गिर जाता है। बाउंसर कहता है, "यह केक टेढ़ा है।" बेकर बहस नहीं करता; वह बस उसे कचरे में डाल देता है और तब तक नया केक बनाता रहता है जब तक कि वह एकदम सही न हो जाए। सिस्टम तब तक कोशिश करता रहता है (3 बार तक) जब तक कि प्रश्न परीक्षण पास न कर ले।
4. परिणाम: एक "स्टैटिक" क्विज़
एक बार जब प्रश्न बाउंसर को पार कर लेते हैं, तो उन्हें एक साधारण टेक्स्ट फ़ाइल (जैसे स्प्रेडशीट) के रूप में सहेजा जाता है।
- यह क्यों मायने रखता है: जब आपके छात्र बाद में क्विज़ देंगे, तो उन्हें AI की आवश्यकता नहीं होगी। वे बस फ़ाइल खोलेंगे। AI जा चुका है। क्विज़ बस एक कागज़ (या डिजिटल फ़ाइल) है जो सुरक्षित, तेज़ है और हर बार चलाने के लिए पैसे खर्च नहीं करता है।
"सीड स्वीप" (Seed Sweep) प्रयोग
लेखक ने विज्ञान (एन्ट्रॉपी, थर्मोडायनामिक्स आदि) के बारे में तीन छोटे, काल्पनिक लेक्चर पर इसका परीक्षण किया।
- उन्होंने अलग-अलग रैंडम सेटिंग्स (जैसे ताश के पत्तों को फेंटना) के साथ फैक्ट्री को 15 बार चलाया।
- उन्होंने 120 प्रश्न तैयार किए।
- अच्छी खबर: प्रत्येक प्रश्न ने सख्त "बा बाउंसर" जाँचों को पास कर लिया। सिस्टम बहुत स्थिर था।
- "चेतावनी" परत: भले ही प्रश्न तकनीकी रूप से सही थे, फिर भी सिस्टम ने 8 प्रश्नों को मानव द्वारा दोबारा जांचने के लिए फ्लैग (चिह्नित) किया। उदाहरण के लिए, एक प्रश्न ने एक संख्या पूछी थी लेकिन यह नहीं बताया था कि "दो दशमलव स्थानों तक राउंड करें।" कंप्यूटर इस तर्क को ठीक नहीं कर सका, इसलिए उसने इसे सुधारने के लिए शिक्षक को फ्लैग किया।
यह एक बड़ी बात क्यों है? ("AI2L" लेंस)
यह पेपर इसे AI2L (AI to Learn) नामक एक दर्शन से जोड़ता है।
- गोपनीयता: आपके लेक्चर नोट्स कभी भी आपके कंप्यूटर को नहीं छोड़ते।
- जवाबदेही: आप देख सकते हैं कि प्रश्न वास्तव में कैसे बनाया गया और गणित की जांच कर सकते हैं।
- ग्रीन AI: आपको हर बार जब कोई छात्र क्विज़ लेता है, तो महंगे क्लाउड सर्वर के लिए भुगतान करने की आवश्यकता नहीं है। आप क्विज़ एक बार जनरेट करते हैं, और फिर यह हमेशा के लिए उपयोग के लिए मुफ्त है।
कमी (सीमाएं)
लेखक ईमानदार हैं कि यह अभी क्या नहीं कर सकता:
- यह कोई जीनियस शिक्षक नहीं है: कंप्यूटर यह जांच सकता है कि गणित सही है या नहीं, लेकिन यह नहीं बता सकता कि प्रश्न वास्तव में निष्पक्ष है या क्या यह सही अवधारणा का परीक्षण करता है। अंतिम सूची को देखने के लिए एक मानव शिक्षक की आवश्यकता होती है और यह कहना होता है, "हाँ, यह एक अच्छा प्रश्न है।"
- इसे चित्रों के साथ संघर्ष करना पड़ता है: यदि आपके लेक्चर PDF में जटिल चार्ट या हस्तलिखित आरेख हैं, तो सिस्टम उन्हें मिस कर सकता है क्योंकि यह केवल टेक्स्ट पढ़ता है।
संक्षेप में
यह पेपर एक गोपनीयता-सुरक्षित, स्व-सुधार करने वाली मशीन का वर्णन करता है जो आपके लेक्चर नोट्स को क्विज़ में बदल देती है। यह एक अथक इंटर्न की तरह कार्य करता है जो प्रश्नों का ड्राफ्ट बनाता है, एक सख्त निरीक्षक की तरह जो गणित की गलतियों को पकड़ता है, और एक अंतिम संपादक की तरह जो सब कुछ पैक करता है ताकि आप अपने छात्रों को बिना किसी इंटरनेट कनेक्शन या AI सब्सक्रिप्शन की आवश्यकता के क्विज़ दे सकें।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।