Dynamically Scaled Activation Steering
यह शोध पत्र डायनामिकली स्केल्ड एक्टिवेशन स्टीयरिंग (DSAS) प्रस्तुत करता है, जो एक विधि-अज्ञेय (method-agnostic) ढांचा है जो जनरेटिव मॉडल्स में विषाक्तता शमन (toxicity mitigation) और उपयोगिता संरक्षण (utility preservation) के बीच के संतुलन को सुधारने के लिए इनपुट संदर्भ के आधार पर एक्टिवेशन हस्तक्षेप की शक्ति को अनुकूल रूप से नियंत्रित करता है और साथ ही न्यूनतम कम्प्यूटेशनल ओवरहेड पेश करता है।
मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें
कल्पना कीजिए कि आप शुद्ध गणित से बने एक विशाल, अदृश्य ऑर्केस्ट्रा के कंडक्टर (संचालक) हैं। यह ऑर्केस्ट्रा एक "जेनरेटिव मॉडल" है, जो एक प्रकार का कंप्यूटर मस्तिष्क है जो कहानियाँ लिख सकता है, चित्र बना सकता है, या समस्याओं को हल कर सकता है। लेकिन एक संगीतकार की तरह, यह कभी-कभी एक गलत सुर या, उससे भी बुरा, एक हानिकारक सुर भी बजा सकता है। वर्षों से, वैज्ञानिकों ने इसे "स्टीयरिंग" (steering) के माध्यम से ठीक करने की कोशिश की है—संगीत को दिशा देने की कोशिश। स्टीयरिंग को एक कंडक्टर के हाथ में बची (baton) लहराने जैसा समझें, जो पूरे ऑर्केस्ट्रा को धीमा बजाने या किसी विशिष्ट वाद्य यंत्र से बचने के लिए कहता है। पुराने तरीके से स्टीयरिंग करने की समस्या यह है कि यह थोड़ा अनाड़ी है: यह पूरे ऑर्केस्टर को एक साथ धीमा बजाने के लिए कहता है, भले ही वे पहले से ही एक सुंदर, सुरक्षित धुन बजा रहे हों। यह संगीत को सपाट और उबाऊ बना देता है, भले ही कुछ भी गलत न हो रहा हो।
आप जो पेपर पढ़ने जा रहे हैं वह एक नया, सुपर-स्मार्ट कंडक्टर पेश करता है जिसे DSAS (डायनामिकली स्केल्ड एक्टिवेशन स्टीयरिंग) कहा जाता है। पूरे समूह को एक साथ निर्देश देने के बजाय, DSAS हर एक संगीतकार को व्यक्तिगत रूप से सुनता है। यह केवल उन विशिष्ट संगीतकारों को बताता है जो एक "विषाक्त" (toxic) या हानिकारक नोट बजाने वाले हैं कि वे अपनी आवाज़ कम करें, जबकि बाकी सबको बिल्कुल वैसे ही खेलने देता है जैसे वे चाहते हैं। यह एक शिक्षक द्वारा "सब शांत हो जाओ!" चिल्लाने और केवल एक छात्र को बात करते देख उसे धीरे से कंधे पर थपथपाने के बीच का अंतर है। यह पेपर दिखाता है कि इस सटीकता के साथ, हम अच्छी चीज़ों को खराब किए बिना बुरे व्यवहार को रोक सकते हैं, जिससे ये AI मस्तिष्क सुरक्षित और अधिक सहायक बनते हैं बिना उनकी बुद्धिमत्ता खोए।
इस पेपर का बड़ा विचार: AI के लिए "स्मार्ट डिमर स्विच"
शोधकर्ताओं, एलेक्स फेरैंडो डी लास मोरेनास और उनकी टीम (Apple और Universitat Autònoma de Barcelona से) ने महसूस किया कि "एक्टिवेशन स्टीयरिंग" का पुराना तरीका बहुत ही भद्दा था। AI की दुनिया में, "एक्टिवेशन स्टीयरिंग" एक ऐसी तकनीक है जहाँ वैज्ञानिक मॉडल के आंतरिक संकेतों को ट्यून करते हैं ताकि उसे वांछित व्यवहार की ओर धकेला जा सके, जैसे कि विनम्र होना या सच बोलना। आमतौर पर, वे एक "ग्लोबल स्ट्रेंथ" (जिसे हम वॉल्यूम नॉब या कह सकते हैं) लागू करते हैं जो मॉडल के हर कार्य के लिए स्टीयरिंग को ऊपर या नीचे करता है।
समस्या क्या है? यदि आप "विनम्र होने" का वॉल्यूम बढ़ाते हैं, तो मॉडल इतना विनम्र हो सकता है कि वह प्रश्नों का उत्तर देना ही बंद कर दे, या यदि आप "विषाक्त" शब्दों को रोकने के लिए इसे ऊपर करते हैं, तो यह रोबोटिक लग सकता है और अपनी रचनात्मकता खो सकता है। पेपर का तर्क है कि हमें यह जानने की आवश्यकता है कि स्टीयरिंग कब करनी है, न कि केवल यह कि कैसे करनी है।
यहाँ आता है DSAS। लेखक एक ऐसा ढांचा प्रस्तावित करते हैं जो AI द्वारा उत्पन्न प्रत्येक शब्द (या "टोकन") के लिए एक स्मार्ट डिमर स्विच की तरह काम करता है। एक ग्लोबल नॉब के बजाय, DSAS AI के प्रत्येक लेयर (layer) के लिए एक छोटा, प्रशिक्षित "गेटकीपर" (द्वारपाल) उपयोग करता है। यह गेटकीपर AI जो कह रहा है उसके संदर्भ (context) को देखता है और पूछता है, "क्या यह विशिष्ट शब्द विषाक्त या हानिकारक होने की संभावना है?"
- यदि उत्तर नहीं है (AI धूप वाले दिन या गणित की समस्या के बारे में बात कर रहा है), तो गेट खुला रहता है, और AI स्वाभाविक रूप से बहता रहता है।
- यदि उत्तर हाँ है (AI कोई अपशब्द या खतरनाक निर्देश देने वाला है), तो गेट बंद हो जाता है, और स्टीयरिंग उस विशिष्ट विचार को बदलने के लिए पूरी ताकत लगा देती है।
पेपर इसे एक मजेदार, गैर-अपमानजनक उदाहरण के साथ प्रदर्शित करता है: AI को "केला" (banana) शब्द से दूर ले जाना। जब AI को एक बंदर द्वारा फल खाने की कहानी लिखने के लिए कहा जाता है, तो DSAS "केला" की अवधारणा को पहचान लेता है और उस शब्द को बोलने से रोकने के लिए एक मजबूत स्टीयरिंग बल लागू करता है। लेकिन जब AI को बिल्ली या कार के बारे में कहानी लिखने के लिए कहा जाता है, तो DSAS देखता है कि "केला" प्रासंगिक नहीं है, इसलिए वह स्टीयरिंग को अकेला छोड़ देता है। परिणाम? AI उम्मीद के मुताबिक "केला" की अवधारणा से बच जाता है, लेकिन वह बिल्लियों या कारों के बारे में बात करने की अपनी क्षमता नहीं खोता है।
उन्होंने क्या पाया: एक बेहतर संतुलन
टीम ने DSAS का परीक्षण कई लोकप्रिय AI मॉडलों (जैसे Qwen और Gemma) पर किया और इसकी तुलना अन्य स्टीयरिंग विधियों से की। उन्होंने दो चीजें मापीं: मॉडल ने विषाक्तता (या "केला" की अवधारणा) से कितनी अच्छी तरह परहेज किया और उसने अपनी सामान्य बुद्धिमत्ता (जैसे सामान्य ज्ञान के प्रश्नों का उत्तर देने या प्रवाहपूर्ण वाक्य लिखने की क्षमता) को कितनी अच्छी तरह बनाए रखा।
परिणाम स्पष्ट थे: DSAS ने लगातार ट्रेड-ऑफ (संतुलन) में सुधार किया।
पेपर के ग्राफ में, जो सबसे अच्छे संभव संतुलन (जिसे "पारेटो फ्रंट" कहा जाता है) को दिखाने वाले पर्वत श्रृंखलाओं की तरह दिखते हैं, DSAS की रेखाएं हमेशा पुराने तरीकों की तुलना में ऊपर और बेहतर थीं।
- विषाक्तता के लिए: जब AI को अभद्र होने से रोकने की कोशिश की गई, तो DSAS ने मॉडलों को बहुत अधिक सुरक्षित बनाया बिना उन्हें टूटे हुए रोबोट जैसा बनाए। मॉडलों ने पुराने "एक ही आकार के" (one-size-fits-all) स्टीयरिंग विधियों की तुलना में अपनी प्रवाहपूर्णता और जटिल प्रश्नों के उत्तर देने की क्षमता (MMLU जैसे बेंचमार्क द्वारा मापा गया) को बहुत बेहतर बनाए रखा।
- छवियों (Images) के लिए: उन्होंने इसे इमेज जनरेटर (चित्र बनाने वाले मॉडल) पर भी आजमाया। उन्होंने मॉडल को केलों की छवियों को धुंधला करने और अन्य छवियों को स्पष्ट रखने के लिए कहा। पुराना तरीका सब कुछ थोड़ा धुंधला कर देता था। हालाँकि, DSAS ने केवल उन्हीं छवियों को धुंधला किया जिनमें वास्तव में केले थे, जिससे कारों और परिदृश्यों (landscapes) की तस्वीरें बिल्कुल स्पष्ट रहीं।
पेपर ने E2E-DSAS नामक एक संस्करण का भी पता लगाया, जहाँ "गेटकीपर" को स्टीयरिंग के साथ ही प्रशिक्षित किया जाता है, न कि एक अलग चरण के रूप में। इस संस्करण ने होनहार प्रदर्शन किया, कभी-कभी मानक DSAS के बराबर या उससे भी बेहतर रहा, जो यह सुझाव देता है कि यह विधि प्रशिक्षण प्रक्रिया में सीधे शामिल होने के लिए पर्याप्त लचीली है।
यह क्या नहीं है (और यह क्या दावा नहीं करता)
यह जानना महत्वपूर्ण है कि यह पेपर क्या नहीं कहता है। लेखक सावधानी बरतते हुए नोट करते हैं कि DSAS सभी AI सुरक्षा समस्याओं को हल करने वाला कोई जादुई डंडा नहीं है।
- यह फाइन-ट्यूनिंग (fine-tuning) का विकल्प नहीं है: पेपर यह दावा नहीं करता कि DSX को अच्छे डेटा पर मॉडल को प्रशिक्षित करने की आवश्यकता को समाप्त करने के लिए है। यह मौजूदा मॉडलों के ऊपर उपयोग किए जाने वाले एक उपकरण की तरह है।
- यह पूर्ण स्थानीयकरण (perfect localization) नहीं है: इमेज प्रयोगों में, हालांकि DSAS विशिष्ट अवधारणाओं को लक्षित करने में बहुत बेहतर था, लेखक स्वीकार करते हैं कि इसने हमेशा चित्र में केवल केले को ही धुंधला नहीं किया। कभी-कभी धुंधलापन बैकग्राउंड (पृष्ठभूमि) में भी फैल गया। यह एक "सॉफ्ट" स्थानीयकरण है, कोई सर्जिकल लेजर नहीं।
- यह डेटा पर निर्भर है: "गेटकीपर" को उदाहरणों के एक छोटे सेट (जैसे 32 विषाक्त वाक्य और 32 सुरक्षित वाक्य) की आवश्यकता होती है ताकि वह जान सके कि क्या देखना है। यदि डेटा शोर भरा या खराब है, तो गेटकीपर भ्रमित हो सकता है, हालांकि पेपर दिखाता है कि ऐसी स्थिति में भी, DSAS मॉडल को तोड़ने के बजाय सुरक्षित रूप से मानक स्टीयरिंग पर वापस चला जाता है।
निष्कर्ष
यह पेपर सुझाव देता है कि AI को नियंत्रित करने का भविष्य सभी के लिए सुरक्षा का वॉल्यूम बढ़ाने के बारे में नहीं है। यह एक स्मार्ट, चौकस कंडक्टर होने के बारे में है जो जानता है कि कब किसी विशिष्ट वाद्य यंत्र को फुसफुसाकर "शश..." कहना है और कब संगीत को स्वतंत्र रूप से बहने देना है। AI जो वास्तव में कह रहा है उसके आधार पर स्टीयरिंग को गतिशील रूप से स्केल करके, DSAS एक ऐसा तरीका प्रदान करता है जिससे इन शक्तिशाली उपकरणों को उनकी उपयोगिता वाली बुद्धिमत्ता को खोए बिना सुरक्षित बनाया जा सके। लेखक दिखाते हैं कि यह दृष्टिकोण टेक्स्ट और इमेज दोनों पर काम करता है, और हालांकि यह कोई पूरी तरह से हल की गई समस्या नहीं है, फिर भी यह एक ऐसे AI की ओर एक महत्वपूर्ण कदम है जो अपनी व्यक्तित्व खोए बिना व्यवहार करना जानता है।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।