← नवीनतम पेपर
💻 computer science

Toward a Threat Actor Profiling Taxonomy for Pre-Release Risk Management of Open-Weight Frontier Models

यह शोध पत्र ओपन-वेट फ्रंटियर एआई मॉडल्स के लिए प्री-रिलीज़ जोखिम प्रबंधन को मानकीकृत करने और उनके मूल्यांकन की व्याख्यात्मकता एवं निष्ठा में सुधार करने के लिए, थ्रेट एक्टर्स (खतरा पैदा करने वाले तत्वों) को स्पष्ट रूप से वर्णित करने हेतु एक छह-विशेषता वाला, अनुभवजन्य रूप से आधारित वर्गीकरण प्रस्तावित करता है।

मूल लेखक: James Zhang

प्रकाशित 2026-08-27
📖 7 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: James Zhang

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

आर्टिफिशियल इंटेलिजेंस की तेजी से बदलती दुनिया में, एक विशिष्ट प्रकार के सॉफ्टवेयर का उदय हुआ है जो एक शक्तिशाली, सार्वभौमिक उपकरण की तरह कार्य करता है। ये सिस्टम, जिन्हें 'फ्रंटियर मॉडल्स' (frontier models) के रूपas जाना जाता है, कोड लिख सकते हैं, जटिल डेटा का विश्लेषण कर सकते हैं, और उन समस्याओं को हल कर सकते हैं जिनके लिए कभी मानव विशेषज्ञों की आवश्यकता होती थी। वर्षों तक, इन उपकरणों के सबसे उन्नत संस्करण बंद दरवाजों के पीछे रखे गए थे, जो केवल सुरक्षित इंटरनेट कनेक्शन के माध्यम से सुलभ थे जहाँ डेवलपर्स यह निगरानी कर सकते थे कि उनका उपयोग कैसे किया जा रहा है। हालाँकि, इन मॉडल्स की एक नई लहर जारी की जा रही है जिसमें उनके अंतर्निहित "वेट्स" (weights)—वे मूल गणितीय निर्देश जो उन्हें काम करने के योग्य बनाते हैं—किसी के भी डाउनलोड करने के लिए स्वतंत्र रूप से उपलब्ध हैं। यह बदलाव एक उच्च-प्रदर्शन वाली कार के ब्लूप्रिंट और इंजन के पुर्जों को जनता में बांटने के समान है; जबकि यह अविश्वसनीय नवाचार और अनुसंधान की अनुमति देता है, इसका यह भी अर्थ है कि एक बार जब पुर्जे बाहर निकल जाते हैं, तो उन्हें वापस नहीं लिया जा सकता। यदि कोई इन फाइलों को डाउनलोड करता है, तो वे सॉफ्टवेयर को संशोधित कर सकते हैं, सुरक्षा सुविधाओं को हटा सकते हैं, या बिना मूल रचनाकारों को पता चले हानिकारक उद्देश्यों के लिए इसका उपयोग कर सकते हैं।

इन सिस्टमों को बनाने वाले लोगों के लिए केंद्रीय चुनौती यह पता लगाना है कि जारी करने से पहले वे कितने खतरनाक हो सकते हैं। वर्तमान में, सुरक्षा टीमें यह देखने के लिए परीक्षण करती हैं कि एक मॉडल क्या कर सकता है, अक्सर इसे कठिन समस्याओं को हल करने के लिए कहती हैं या इसे हानिकारक जानकारी प्रकट करने के लिए छलने की कोशिश करती हैं। लेकिन इन परीक्षणों को डिजाइन करने के तरीके में एक महत्वपूर्ण अंतर मौजूद है। सुरक्षा शोधकर्ता अक्सर यह मान लेते हैं कि एक सामान्य "बुरे तत्व" (bad actor) द्वारा तकनीक का दुरुपयोग किया जा सकता है, लेकिन वे शायद ही कभी स्पष्ट रूप से परिभाषित करते हैं कि वह व्यक्ति वास्तव में कौन है। क्या वह लैपटॉप के साथ एक अकेला किशोर है? एक अच्छी तरह से वित्तपोषित आपराधिक गिरोह? या एक राज्य-प्रायोजित विशेषज्ञों की टीम? किसी स्पष्ट चित्र के बिना, परीक्षण एक परिष्कृत हमलावर के लिए बहुत आसान या एक नौसिखिए के लिए बहुत कठिन हो सकते हैं, जिससे डेवलपर्स के पास सुरक्षा की झूठी भावना या अनावश्यक भय पैदा हो सकता है। प्रश्न केवल यह नहीं है कि सॉफ्टवेयर क्या कर सकता है, बल्कि यह है कि इसकी संभावना किसकी है और सफल होने के लिए उन्हें कितने प्रयास की आवश्यकता होगी।

त्सिंगहुआ विश्वविद्यालय (Tsinghua University) को प्रस्तुत किया गया एक हालिया शोध पत्र संभावित खतरों का वर्णन करने के एक नए तरीके का प्रस्ताव देकर इस अनिश्चितता को संबोधित करता है। लेखक, जेम्स क्यू झांग (James Q Zhang), तर्क देते हैं कि किसी भी सुरक्षा परीक्षण को चलाने से पहले, डेवलपर्स को उस व्यक्ति या समूह की विशेषताओं को स्पष्ट रूप से परिभाषित करना चाहिए जिसके विरुद्ध वे सुरक्षा प्रदान करने का प्रयास कर रहे हैं। ऐसा करने के लिए, उन्होंने एक संरचित प्रणाली, या वर्गीकरण (taxonomy) बनाया, जो एक खतरे वाले तत्व को छह विशिष्ट श्रेणियों में विभाजित करता है। अस्पष्ट लेबल जैसे "कुशल" या "अच्छी तरह से संसाधन युक्त" के बजाय, यह प्रणाली ठोस विवरण मांगती है: तत्व तकनीकी रूप से कितना उन्नत है? क्या उन्हें पहले से जीव विज्ञान या साइबर युद्ध के बारे में जानकारी है? उनके समूह में कितने लोग हैं? उनके पास किस प्रकार के उपकरण हैं? वे कितना पैसा खर्च कर सकते हैं? और वे कितना समय निवेश करने के लिए तैयार हैं?

शोधकर्ताओं ने इस ढांचे को विकसित करने के लिए यह देखा कि अन्य क्षेत्रों, जैसे साइबर सुरक्षा और आतंकवाद अध्ययन के विशेषज्ञ खतरों का विश्लेषण कैसे करते हैं। उन्होंने पाया कि जबकि इन क्षेत्रों में हमलावरों का वर्णन करने के विस्तृत तरीके हैं, आर्टिफिशियल इंटेलिजेंस समुदाय ने अभी तक एक समान मानक को नहीं अपनाया था। नई प्रणाली इन छह विशेषताओं को विभिन्न क्षमताओं वाले एक ग्रिड में व्यवस्थित करती है, जो न्यूनतम संसाधनों वाले एक बुनियादी उपयोगकर्ता से लेकर अत्यधिक परिष्कृत, अच्छी तरह से वित्तपोषित संस्थान तक विस्तृत है। उदाहरण के लिए, "वित्तीय क्षमता" के तहत, स्तर एक हजार डॉलर से कम से लेकर दस मिलियन डॉलर से अधिक तक हैं। "समय क्षितिज" (time horizon) के तहत, स्तर एक दिन से कम समय की आवेगपूर्ण कार्रवाई से लेकर छह महीने या उससे अधिक समय तक चलने वाले अभियानों तक फैले हुए हैं।

यह पत्र इन दो अलग-अलग प्रोफाइल्स को बनाकर इस दृष्टिकोण के मूल्य को प्रदर्शित करता है कि कैसे अलग-अलग खतरों के लिए अलग-अलग सुरक्षा परीक्षणों की आवश्यकता होती है। पहला प्रोफाइल एक "कट्टरपंथी स्नातक शोधकर्ता" (radicalized graduate researcher) का वर्णन करता है। इस व्यक्ति के पास जीव विज्ञान का गहरा ज्ञान है और वह कई महीनों से एक हानिकारक लक्ष्य पर काम कर रहा है, लेकिन वह बहुत कम पैसे और केवल बुनियादी कंप्यूटर कौशल के साथ अकेला काम कर रहा है। क्योंकि इस व्यक्ति को पहले से ही विज्ञान का ज्ञान है, इसलिए उनके लिए सुरक्षा परीक्षण इस बात पर केंद्रित होना चाहिए कि क्या AI उन्हें हमले के लॉजिस्टिक्स की योजना बनाने में मदद कर सकता है, न कि उन्हें विज्ञान सिखाने पर। दूसरा प्रोफाइल एक "छोटे, आर्थिक रूप से प्रेरित आपराधिक समूह" का वर्णन करता है। इन तत्वों के पास मध्यम कंप्यूटर कौशल और उपकरण किराए पर लेने के लिए कुछ पैसा है, लेकिन उनके पास अपने लक्ष्य के बारे में विशिष्ट ज्ञान की कमी है। उनके लिए, सबसे खतरनाक जोखिम यह है कि AI उनके ज्ञान की कमियों को भर सकता है, एक मार्गदर्शक के रूप में कार्य कर सकता है जो उन्हें उन कमजोरियों को खोजने में मदद करे जिन्हें वे अपने दम पर नहीं देख पाते।

इस संरचित प्रणाली का उपयोग करके, डेवलपर्स अनुमान लगाना बंद कर सकते हैं और उन वास्तविक जोखिमों के अनुरूप परीक्षण डिजाइन करना शुरू कर सकते हैं जिनके बारे में वे चिंतित हैं। यदि कोई कंपनी जानती है कि वह एक अच्छी तरह से वित्तपोषित समूह के बारे में चिंतित है जिसके पास एक दीर्घकालिक योजना है, तो वे एक सुरक्षा परीक्षण सेट कर सकते हैं जो उनके परीक्षकों को एक बड़ा बजट और पर्याप्त समय दे, जो एक गंभीर, निरंतर प्रयास का अनुकरण करता है। यदि वे सीमित संसाधनों वाले एक अकेले व्यक्ति के बारे में चिंतित हैं, तो परीक्षण को उन बाधाओं को प्रतिबिंबित करने के लिए समायोजित किया जा सकता है। लेखक का सुझाव है कि इस पद्धति को रिलीज प्रक्रिया का एक मानक हिस्सा बनना चाहिए, ठीक वैसे ही जैसे चिकित्सा शोधकर्ताओं को क्लिनिकल ट्रायल शुरू करने से पहले अपनी योजनाएं लिखनी पड़ती हैं। यह सुनिश्चित करेगा कि सुरक्षा मूल्यांकन केवल यादृच्छिक जांच नहीं, बल्कि विशिष्ट, अच्छी तरह से परिभाषित विरोधियों के विरुद्ध जोखिम के सटीक माप हैं।

यह पत्र इस बात पर जोर देता है कि यह विशेष रूप से 'ओपन-वेट मॉडल्स' (open-weight models) के लिए अत्यंत आवश्यक है, जहाँ सॉफ्टवेयर सार्वजनिक रूप रूप से जारी किया जाता है और इसे वापस नहीं लिया जा सकता। एक बार जब ये वेट्स बाहर निकल जाते हैं, तो डेवलपर्स नियंत्रण खो देते हैं, जिससे नुकसान को रोकने का एकमात्र अवसर रिलीज से पहले का निर्णय होता है। लेखक यह दावा नहीं करते हैं कि यह प्रणाली सभी सुरक्षा समस्याओं को हल करती है या यह भविष्य की निश्चितता के साथ भविष्यवाणी कर सकती है। इसके बजाय, वे सुरक्षा परीक्षणों के पीछे के अनुमानों को दृश्यमान और तुलनीय बनाने के लिए एक उपकरण प्रदान करते हैं। डेवलपर्स को यह बताने के लिए मजबूर करके कि वे किसके विरुद्ध सुरक्षा प्रदान कर रहे हैं, यह प्रणाली खतरनाक परिदृश्यों को अनदेखा करना कठिन बनाती है और विभिन्न मॉडलों की सुरक्षा की तुलना करना आसान बनाती है। अंतिम लक्ष्य उद्योग को अस्पष्ट चेतावनियों से स्पष्ट, कार्रवाई योग्य जोखिम प्रबंधन की ओर ले जाना है, यह सुनिश्चित करना कि इन नई तकनीकों की शक्तिशाली क्षमताओं को उन लोगों के संदर्भ में समझा जाए जो इनका दुरुपयोग करने की कोशिश कर सकते हैं।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →