← नवीनतम पेपर
💬 NLP

Building Production-Ready Probes For Gemini

यह शोध पत्र नए प्रोब आर्किटेक्चर प्रस्तावित करता है जिन्हें वितरण बदलावों (distribution shifts)—विशेष रूप से लंबी-संदर्भ इनपुट (long-context inputs)—की चुनौती को दूर करके मॉडल के दुरुपयोग को कम करने के लिए डिज़ाइन किया गया है, और गूगल के जेमिनी (Gemini) में मजबूत, कुशल और सामान्यीकरण योग्य सुरक्षा निगरानी प्रदान करने के लिए उनकी सफल तैनाती का प्रदर्शन करता है।

मूल लेखक: János Kramár, Joshua Engels, Zheng Wang, Bilal Chughtai, Rohin Shah, Neel Nanda, Arthur Conmy

प्रकाशित 2026-02-12
📖 4 मिनट में पढ़ें☕ कॉफ़ी ब्रेक में पढ़ें

मूल लेखक: János Kramár, Joshua Engels, Zheng Wang, Bilal Chughtai, Rohin Shah, Neel Nanda, Arthur Conmy

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक विशाल, हाई-टेक हवाई अड्डा चला रहे हैं। अधिकांश यात्री मिलनसार यात्री हैं, लेकिन एक बहुत छोटा हिस्सा शायद तस्करी का सामान छिपाने की कोशिश कर रहा हो सकता है।

सबको सुरक्षित रखने के लिए, आपके पास दो मुख्य विकल्प हैं:

  1. "सुपर-स्कैनर" (LLM): आप हर एक व्यक्ति को देखने के लिए एक विश्व स्तरीय सुरक्षा विशेषज्ञ को काम पर रखते हैं। यह अविश्वसनीय रूप से सटीक है, लेकिन यह बेहद महंगा, धीमा है और इससे लंबी कतारें बन जाती हैं।
  2. "मेटल डिटेक्टर" (प्रोब): आप गेट पर एक त्वरित, सस्ता सेंसर लगाते हैं। यह बिजली की तरह तेज़ है और इसमें लगभग कुछ भी खर्च नहीं होता, लेकिन यह थोड़ा "मूर्ख" है। कभी-कभी यह किसी यात्री के बेल्ट के बकल पर बीप करता है (एक गलत अलार्म), और कभी-कभी यह छिपी हुई धातु के एक छोटे से टुकड़े को मिस कर जाता है (एक सुरक्षा विफलता)।

यह शोध पत्र, जिसे Google DeepMind के शोधकर्ताओं द्वारा लिखा गया है, AI के लिए सर्वश्रेष्ठ "मेटल डिटेक्टर" बनाने के बारे में है।

समस्या: "लंबी सूटकेस" वाली खराबी (The "Long Suitcase" Glitch)

शोधकर्ताओं ने वर्तमान AI "मेटल डिटेक्टर्स" (जिन्हें प्रोब्स कहा जाता है) में एक बड़ी खामी देखी। ये प्रोब्स छोटी, त्वरित बातचीत को देखने के लिए प्रशिक्षित होते हैं। लेकिन वास्तविक दुनिया में, लोग केवल एक सेकंड के लिए पास से गुजर नहीं जाते; वे लंबी, जटिल बातचीत में शामिल होते हैं।

कल्पना कीजिए कि यदि आपका मेटल डिटेक्टर किसी व्यक्ति के हाथ में चाकू पहचानने में माहिर था, लेकिन यदि वही व्यक्ति उसी चाकू को एक विशाल, 10-फुट लंबे सूटकेस के बिल्कुल नीचे छिपा देता, तो डिटेक्टर बाकी सभी चीजों से "अभिभूत" (overwhelmed) हो जाता और उसे मिस कर देता। ऐसा तब होता है जब AI प्रोब्स "लॉन्ग-कॉन्टेक्स्ट" इनपुट का सामना करते हैं—वे अपना ध्यान खो देते हैं।

समाधान: तीन चतुर अपग्रेड

शोधकर्ताओं ने इसे ठीक करने के तीन मुख्य तरीके पेश किए:

1. "मैग्नीफाइंग ग्लास" आर्किटेक्चर (MultiMax और Rolling Attention)
पूरे "सूटकेस" को एक एकल स्कोर में सारांशित करने की कोशिश करने के बजाय, उन्होंने नए आर्किटेक्चर बनाए जो एक मैग्नीफाइंग ग्लास (आवर्धक लेंस) की तरह काम करते हैं। पूरे "क्या यह पूरी बातचीत खराब है?" पूछने के बजाय, प्रोब पूछता है, "क्या इस बातचीत में कोई विशिष्ट क्षण या छोटा सा हिस्सा है जो संदिग्ध दिखता है?" बातचीत के "औसत" के बजाय खतरे के "शिखरों" (peaks) पर ध्यान केंद्रित करके, उन्होंने सिग्नल को कम होने से रोका।

2. "रोबोट आर्किटेक्ट" (AlphaEvolve)
एक आदर्श सेंसर डिजाइन करना मनुष्यों के लिए कठिन है। इसलिए, उन्होंने एक अन्य AI का उपयोग एक आर्किटेक्ट के रूप में किया। उन्होंने इसे एक लक्ष्य दिया ("एक बेहतर सेंसर बनाओ") और इसे हजारों अलग-अलग डिजाइन विकसित करने दिया, ठीक वैसे ही जैसे प्रकृति जानवरों में बेहतर गुणों को विकसित करती है। इस "रोबोट आर्किटेक्ट" ने वास्तव में ऐसे नए, जटिल सेंसर डिजाइन खोज निकाले जिन्हें मानव शोधकर्ताओं ने तक नहीं सोचा था।

3. "स्मार्ट एस्केलेशन" सिस्टम (Cascading Classifiers)
यह सबसे व्यावहारिक हिस्सा है। उन्होंने महसूस किया कि आपको हर किसी के लिए "सुपर-स्कैनर" (महंगे AI) की आवश्यकता नहीं है। उन्होंने एक ऐसा सिस्टम बनाया जहाँ:

  • सस्ता सेंसर पहले सभी की जांच करता है।
  • यदि सेंसर 100% आश्वस्त है कि व्यक्ति सुरक्षित है, तो वे तुरंत आगे बढ़ जाते हैं।
  • यदि सेंसर 100% आश्वस्त है कि वे एक खतरा हैं, तो उन्हें रोका जाता है।
  • केवल तभी जब सेंसर "अनिश्चित" हो (वह "शायद" वाला क्षेत्र), सिस्टम गहन जांच के लिए महंगे, उच्च-स्तरीय सुरक्षा विशेषज्ञ को बुलाता है।

परिणाम: तेज़, सस्ता और सुरक्षित
इस "स्मार्ट एस्केलेशन" पद्धति का उपयोग करके, उन्होंने एक उच्च-स्तरीय विशेषज्ञ की सटीकता प्राप्त की, जबकि उन्होंने "विशेषज्ञ की फीस" केवल 8% समय के लिए ही दी।

निष्कर्ष: उन्होंने यह पता लगा लिया है कि AI सुरक्षा मॉनिटर कैसे बनाए जाएं जो लंबी, जटिल बातचीत को संभालने के लिए पर्याप्त स्मार्ट हों, चालाक हमलावरों को पकड़ने के लिए पर्याप्त मजबूत हों, और वास्तव में वास्तविक दुनिया में उपयोग करने के लिए पर्याप्त सस्ते हों।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →