← नवीनतम पेपर
🤖 AI

PhreshPhish: A Real-World, High-Quality, Large-Scale Phishing Website Dataset and Benchmark

यह शोधपत्र PhreshPhish को प्रस्तुत करता है, जो एक बड़े पैमाने का, उच्च-गुणवत्ता वाला डेटासेट और एक व्यापक बेंचमार्क सुइट है जिसे डेटा लीकेज, अवास्तविक बेस रेट्स और खराब डेटा गुणवत्ता की समस्याओं को संबोधित करके मौजूदा फिशिंग डिटेक्शन संसाधनों की सीमाओं को दूर करने और अधिक यथार्थवादी एवं मानकीकृत मॉडल मूल्यांकन को सक्षम करने के लिए डिज़ाइन किया गया है।

मूल लेखक: Thomas Dalton, Hemanth Gowda, Girish Rao, Sachin Pargi, Alireza Hadj Khodabakhshi, Joseph Rombs, Stephan Jou, Manish Marwah

प्रकाशित 2026-02-13
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Thomas Dalton, Hemanth Gowda, Girish Rao, Sachin Pargi, Alireza Hadj Khodabakhshi, Joseph Rombs, Stephan Jou, Manish Marwah

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि इंटरनेट एक विशाल, हलचल भरा शहर है। इस शहर में वैध दुकानें (सुरक्षित वेबसाइटें) हैं जहाँ लोग चीजें खरीदते हैं, समाचार पढ़ते हैं और दोस्तों से चैट करते हैं। लेकिन इन परछाइयों में फिशर्स (Phishers) छिपे हुए हैं। वे धोखेबाजों की तरह हैं जो बिल्कुल असली दुकानों जैसे दिखने वाले नकली स्टोर बनाते हैं, ताकि वे आपको आपकी चाबियाँ, बटुआ या गुप्त पासवर्ड देने के लिए छल सकें।

लंबे समय तक, उन्हें रोकने की कोशिश करने वाले लोगों (सुरक्षा शोधकर्ताओं) ने एक हाथ पीछे बंधे हुए लड़ाई लड़ी है। क्यों? क्योंकि उनके पास अभ्यास करने के लिए कोई अच्छा "प्रशिक्षण मैनुअल" या वास्तविक "अभ्यास मैदान" नहीं था।

यहाँ PhreshPhish की कहानी है, एक नया प्रोजेक्ट जो खेल बदल रहा है, जिसे सरल भाषा में समझाया गया है।

1. समस्या: "टूटा हुआ ट्रेनिंग जिम"

कल्पना कीजिए कि आप एक सुरक्षा गार्ड को नकली आईडी पहचानने के लिए प्रशिक्षित कर रहे हैं।

  • पुराने डेटासेट: गार्डों के उपयोग में जो प्रशिक्षण मैनुअल थे, वे टूटे हुए उपकरणों वाले एक जिम की तरह थे। उनमें बहुत अधिक स्पष्ट रूप से नकली चीजें थीं (पहचानने में आसान), आईडी 10 साल पुरानी थी (आउटडेटेड), और कभी-कभी "नकली" आईडी वास्तव में एक ही बॉक्स में छिपी "असली" आईडी की प्रतियां ही थीं।
  • परिणाम: गार्ड जिम में शानदार दिखते थे (99% सटीकता!), लेकिन जब वे वास्तविक शहर में गए, तो वे बुरी तरह विफल रहे क्योंकि वास्तविक धोखेबाज अधिक चालाक, तेज़ और नए तरीकों का उपयोग करने वाले थे।

शोधकर्ताओं ने पाया कि अधिकांश मौजूदा डेटासेट जानकारी "लीक" कर रहे थे। यह ऐसा था जैसे सुरक्षा गार्ड को टेस्ट से पहले उत्तर कुंजी (answer key) दे दी गई हो। वे भी अत्यधिक आत्मविश्वासी थे क्योंकि प्रशिक्षण डेटा में 50% लोग नकली थे, जबकि वास्तविक दुनिया में शायद 1,000 में से केवल 1 ही नकली होता है।

2. समाधान: "एक वास्तविक सिमुलेशन शहर बनाना"

OpenText की टीम ने PhreshPhish बनाया। इसे एक विशाल, अति-यथार्थवादी सिमुलेशन शहर बनाने के रूप में समझें जिसका उपयोग सुरक्षा गार्डों को प्रशिक्षित करने के लिए किया जाता है।

  • संग्रह (The Hunt): उन्होंने केवल नकली साइटों की रिपोर्ट होने का इंतज़ार नहीं किया। उन्होंने "डिजिटल जासूसों" (वेब स्क्रेपर्स) का एक बेड़ा भेजा जो वास्तविक मानव ब्राउज़र की तरह काम करते थे। इन जासूसों ने नकली साइटों के प्रकट होते ही उन्हें ढूंढ निकाला।

    • चुनौती: धोखेबाज चालाक होते हैं। वे "क्लोकिंग" (एक ऐसा मुखौटा पहनना जो देखने वाले के आधार पर बदल जाता है) और "एफेमेरलिटी" (नकली दुकान 10 मिनट में बंद हो जाती है) का उपयोग करते हैं।
    • समाधान: जासूस तेज़ थे, उन्होंने अलग-अलग भेष (IP एड्रेस) अपनाए, और साइट के प्रकट होते ही उसे कैप्चर करने के लिए तैयार थे।
  • सफाई (गुणवत्ता नियंत्रण): अच्छे जासूसों के साथ भी, गलतियाँ होती हैं। कभी-कभी जासूस एक "404 एरर" पेज या "साइट हटा दी गई" का नोटिस कैप्चर कर लेता है, न कि वास्तविक नकली साइट।

    • टीम ने दो-चरणीय सफाई प्रक्रिया बनाई:
      1. रोबोट फ़िल्टर: एक कंप्यूटर ने स्वचालित रूप रूप से उन चीजों को बाहर कर दिया जो त्रुटि संदेश (जैसे "Not Found" वाला पेज) की तरह दिखती थीं।
      2. मानव निरीक्षक: एक इंसान ने समान पेजों के एक "प्रतिनिधि" नमूने को देखा। यदि इंसान ने कहा, "यह कचरा है," तो कंप्यूटर ने समान पेजों के पूरे समूह को बाहर कर दिया। इसने समय बचाया और उच्च गुणवत्ता सुनिश्चित की।

3. बेंचमार्क: "वास्तविक दुनिया की परीक्षा"

यह सबसे महत्वपूर्ण हिस्सा है। शोधकर्ताओं ने आपको केवल डेटा का ढेर नहीं दिया; उन्होंने एक मानकीकृत टेस्ट बनाया ताकि यह देखा जा सके कि वास्तव में सबसे अच्छा सुरक्षा गार्ड कौन है।

  • "बेस रेट" वास्तविकता की जाँच: पुराने टेस्ट में, परीक्षा आसान थी क्योंकि आधे लोग नकली थे। PhreshPhish टेस्ट में, उन्होंने कठिनाई को समायोजित किया। उन्होंने ऐसी परीक्षाएं बनाईं जहाँ नकली लोग उतने ही दुर्लभ थे जितने वे वास्तविक जीवन में होते हैं (0.05% से 5%)।
    • उपमा: हवाई अड्डे पर मेटल डिटेक्टर की कल्पना करें। यदि आप इसे चाकू से भरे बैग के साथ टेस्ट करते हैं, तो यह आसान है। लेकिन यदि आप इसे 10,000 बैगों के साथ टेस्ट करते हैं और केवल एक में चाकू है, तो डिटेक्टर को अविश्वसनीय रूप से सटीक होना चाहिए ताकि वह हर बेल्ट बकल पर "किलर!" न चिल्लाने लगे।
  • "कठिनाई" फ़िल्टर: उन्होंने टेस्ट से "आसान" नकली साइटों (जो स्पष्ट रूप से नकली थीं) को हटा दिया। उन्होंने केवल उन्हीं को रखा जो बहुत वास्तविक दिखती थीं, जिससे मॉडल को अधिक मेहनत करने के लिए मजबूर होना पड़ा।
  • "लीकेज" की रोकथाम: उन्होंने सुनिश्चित किया कि सुरक्षा गार्ड चीटिंग न कर सकें। टेस्ट डेटा प्रशिक्षण डेटा के सापेक्ष भविष्य का था, और उन्होंने उन सभी पेजों को हटा दिया जो प्रशिक्षण पेजों के बहुत समान दिखते थे।

4. परिणाम: परीक्षा में कौन जीता?

शोधकर्ताओं ने इस नए, कठिन टेस्ट पर चार अलग-अलग प्रकार के "गार्ड्स" (AI मॉडल) का परीक्षण किया:

  1. लीनियर मॉडल: एक सरल, नियम-आधारित गार्ड।
  2. FFN मॉडल: एक थोड़ा स्मार्ट, उथला न्यूरल नेटवर्क।
  3. GTE मॉडल: एक परिष्कृत मॉडल जो टेक्स्ट और कोड के गहरे अर्थ को समझता है (जैसे एक जासूस जो शब्दों के बीच के अर्थ को पढ़ता है)।
  4. LLM मॉडल: एक विशाल AI (जैसे एक सुपर-इंटेलिजेंट चैटबॉट) जिसे इस विशिष्ट डेटा पर बिना किसी पूर्व प्रशिक्षण के यह अनुमान लगाने के लिए कहा गया कि साइट नकली है या नहीं।

परिणाम:

  • जब टेस्ट "आसान" था (अधिक नकली साइटें), तो सभी अच्छा प्रदर्शन करते थे।
  • जब टेस्ट "कठिन" हुआ (वास्तविक दुनिया की दुर्लभता), तो सरल मॉडल विफल हो गए।
  • विजेता: GTE मॉडल (परिष्कृत जासूस) ने सबसे बेहतर तरीके से खुद को संभाला, हालांकि जब नकली साइटें अत्यंत दुर्लभ थीं, तब भी इसे संघर्ष करना पड़ा।
  • आश्चर्य: विशाल चैटबॉट (LLM) ने आश्चर्यजनक रूप से खराब प्रदर्शन किया। क्यों? क्योंकि वह फिशिंग के विशिष्ट पैटर्न को पढ़े बिना केवल अनुमान लगाने की कोशिश कर रहा था, जबकि अन्य मॉडलों को विशेष रूप से डेटा पर प्रशिक्षित किया गया था।

यह क्यों मायने रखता है

PhreshPhish से पहले, शोधकर्ता पुराने, टूटे हुए टेक्स्टबुक का उपयोग करके टेस्ट की तैयारी करने वाले छात्रों की तरह थे। उन्हें लगता था कि वे प्रतिभाशाली हैं क्योंकि उन्होंने अभ्यास परीक्षा में 100% अंक प्राप्त किए थे।

अब, PhreshPhish के साथ, उनके पास एक वास्तविक, उच्च-दांव वाला सिमुलेशन है।

  • शोधकर्ताओं के लिए: यह यह देखने के लिए एक निष्पक्ष मैदान है कि कौन सा AI वास्तव में अच्छा है।
  • आपके लिए: इसका मतलब है कि आपके ब्राउज़र और ईमेल में सुरक्षा उपकरण अंततः वास्तविक नकली साइटों को पहचानने में बहुत बेहतर हो जाएंगे, बिना आपकी वैध बैंक या पसंदीदा समाचार साइट को गलती से ब्लॉक किए।

संक्षेप में, PhreshPhish वह नया, गोल्ड-स्टैंडर्ड "ड्रिल ग्राउंड" है जो सुनिश्चित करता है कि हमारे डिजिटल सुरक्षा गार्ड वास्तविक युद्ध के लिए तैयार हैं।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →