← नवीनतम पेपर
🤖 machine learning

Operationalizing Fairness in Text-to-Image Models: A Survey of Bias, Fairness Audits and Mitigation Strategies

यह शोध पत्र पूर्वाग्रह के प्रकारों का एक वर्गीकरण स्थापित करके, आदर्श मानदंडों और व्यावहारिक मानकों के बीच के अंतर का आलोचनात्मक विश्लेषण करके, और कठोर, लक्ष्य-आधारित परीक्षण के माध्यम से निष्पक्षता को क्रियान्वित करने के लिए एक नया ढांचा प्रस्तावित करके, टेक्स्ट-टू-इमेज मॉडलों में पूर्वाग्रह और निष्पक्षता की एक व्यापक व्यवस्थित समीक्षा प्रदान करता है।

मूल लेखक: Megan Smith, Venkatesh Thirugnana Sambandham, Florian Richter, Laura Crompton, Matthias Uhl, Torsten Schön

प्रकाशित 2026-04-21
📖 7 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Megan Smith, Venkatesh Thirugnana Sambandham, Florian Richter, Laura Crompton, Matthias Uhl, Torsten Schön

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आपके पास एक जादुई, सुपर-स्मार्ट कलाकार रोबोट है। आप "एक डॉक्टर" जैसा एक सरल वाक्य टाइप कर सकते हैं और यह तुरंत एक सटीक चित्र बना देता है। यह वही है जो टेक्स्ट-टू-इमेज (T2I) मॉडल करते हैं। वे अद्भुत हैं, लेकिन उनमें एक गड़बड़ी (glitch) है: वे अक्सर दुनिया को एक बहुत ही संकीर्ण, रूढ़िवादी तरीके से चित्रित करते हैं। यदि आप "डॉक्टर" मांगते हैं, तो रोबोट लगभग हमेशा एक श्वेत पुरुष को चित्रित करता है, भले ही वास्तविक दुनिया में डॉक्टर सभी आकारों, रंगों और पृष्ठभूमियों से आते हों।

यह शोध पत्र इन रोबोट कलाकारों का एक बड़ा "चेक-अप" है। लेखक यह समझने की कोशिश कर रहे हैं कि रोबोट पक्षपाती क्यों है, उस पक्षपात को कैसे मापा जाए, और रोबोट की चित्र बनाने की क्षमता को खराब किए बिना इसे कैसे ठीक किया जाए।

यहाँ इस शोध पत्र को सरल, रोजमर्रा की अवधारणाओं में तोड़कर समझाया गया है:

1. समस्या: रोबोट का "इको चैंबर" (Echo Chamber)

रोबोट ने इंटरनेट से अरबों तस्वीरें देखकर पेंटिंग करना सीखा। लेकिन इंटरनेट पूर्ण नहीं है; यह रूढ़ियों (stereotypes) से भरा है।

  • उपमा (Analogy): कल्पना कीजिए कि रोबोट एक ऐसा छात्र है जिसने केवल 1950 के दशक के टीवी शो देखे हैं। यदि आप उससे "नर्स" बनाने के लिए कहते हैं, तो वह एक महिला को सफेद यूनिफॉर्म में बनाएगा, इसलिए नहीं कि यही एकमात्र सत्य है, बल्कि इसलिए क्योंकि उसने केवल यही देखा है।
  • मुद्दा: जब रोबोट पेंट करता है, तो वह केवल इंटरनेट की नकल नहीं करता; वह रूढ़ियों को बढ़ा-चढ़ाकर (amplify) दिखाता है। वह "श्वेत पुरुष डॉक्टर" को वास्तविक जीवन की तुलना में और भी अधिक सामान्य दिखाता है।

2. भ्रम: "बायस" (Bias) बनाम "फेयरनेस" (Fairness)

शोध पत्र बताता है कि शोधकर्ता "बायस" और "फेयरनेस" जैसे शब्दों का उपयोग एक-दूसरे के स्थान पर कर रहे हैं, जो भ्रमित करने वाला है। वे सोचने का एक नया तरीका प्रस्तावित करते हैं:

  • बायस (अवलोकन/Observation): यह केवल समस्या को नोटिस करना है। "हे, रोबोट ने 'CEO' के लिए 90% पुरुषों को चित्रित किया।" यह एक डॉक्टर द्वारा यह कहने जैसा है, "आपको बुखार है।"
  • फेयरनेस (लक्ष्य/Goal): यह तय करना है कि सही उत्तर क्या होना चाहिए। "हम चाहते हैं कि रोबोट ऐसे CEO बनाए जो वास्तविक दुनिया की तरह दिखें।"

लेखक एक महत्वपूर्ण अंतर पेश करते हैं जिसे टारगेट फेयरनेस (Target Fairness) बनाम थ्रेशोल्ड फेयरनेस (Threshold Fairness) कहा जाता है:

  • टारगेट फेयरनेस (आदर्श/Ideal): यह कहने जैसा है, "हम चाहते हैं कि रोबोट 50% पुरुष और 50% महिला बनाए।" यह एक अच्छा लक्ष्य है, लेकिन यह आपको यह नहीं बताता कि रुकना कब है। क्या 49% पुरुष ठीक हैं? क्या 40% ठीक है? यह अस्पष्ट है।
  • थ्रेशोल्ड फेयरनेस (नियम पुस्तिका/Rulebook): यह एक ट्रैफिक लाइट की तरह है। यह कहता है, "यदि रोबोट वास्तविक दुनिया की तुलना में 10% से अधिक महिलाओं को कम चित्रित करता है, तो यह फेल (fail) हो जाएगा।" यह एक स्पष्ट "पास" या "फेल" का नियम देता है। शोध पत्र का तर्क है कि हमें अस्पष्ट आदर्शों की नहीं, बल्कि इन स्पष्ट नियमों की आवश्यकता है।

3. "फेयर" मापने के तीन तरीके

शोध पत्र कहता है कि यह तय करने के तीन अलग-अलग तरीके हैं कि क्या एक रोबोट निष्पक्ष (fair) है, और वे सभी अलग हैं:

  1. "मिरर" दृष्टिकोण (अनुपातिक प्रतिनिधित्व/Proportional Representation): रोबोट को ठीक वैसा ही चित्रित करना चाहिए जैसा वास्तविक दुनिया दिखती है। यदि वास्तविक दुनिया में 20% डॉक्टर महिलाएं हैं, तो रोबोट को 20% महिलाएं चित्रित करनी चाहिए।
  2. "इक्वलाइज़र" दृष्टिकोण (जनसांख्यिकीय समानता/Demographic Parity): रोबोट को वास्तविकता की परवाह किए बिना सभी को समान रूप से चित्रित करना चाहिए। उसे हर नौकरी के लिए 50% पुरुष और 50% महिला बनाना चाहिए, भले ही वह वास्तविक जीवन से मेल न खाती हो।
  3. "क्वालिटी" दृष्टिकोण (प्रदर्शन समानता/Performance Parity): रोबोट को सभी समूहों को समान उच्च गुणवत्ता के साथ चित्रित करना चाहिए। उसे एक "महिला डॉक्टर" को धुंधला या अजीब तरीके से नहीं बनाना चाहिए जबकि "पुरुष डॉक्टर" एकदम सटीक दिखे।

4. गड़बड़ी कहाँ होती है (पाइपलाइन)

लेखक बताते हैं कि पक्षपात रोबोट के मस्तिष्क के तीन अलग-अलग चरणों में घुस सकता है:

  • अनुवादक (Text Encoder): रोबोट आपके शब्द "डॉक्टर" को पढ़ता है और चित्र बनाना शुरू करने से पहले ही तुरंत "पुरुष" के बारे में सोचने लगता है।
  • पेंटर (Generative Backbone): रोबोट का मुख्य इंजन उन चीजों को चित्रित करना पसंद करता है जो उसने प्रशिक्षण के दौरान सबसे अधिक देखी हैं। वह आलसी हो जाता है और रूढ़ियों का सहारा लेता है।
  • कंप्रेसर (Latent Space): मेमोरी बचाने के लिए, रोबोट इमेज डेटा को सिकोड़ देता है। इस प्रक्रिया में, वह गलती से अल्पसंख्यक समूहों के विवरण (जैसे विशिष्ट त्वचा के रंग या सांस्कृतिक विशेषताएं) को हटा देता है क्योंकि वे उसके प्रशिक्षण डेटा में "दुर्लभ" होते हैं।

5. इसे कैसे ठीक करें (टूलकिट)

शोध पत्र आसान हैक से लेकर गहरी सर्जरी तक, रोबोट को ठीक करने के चार मुख्य तरीकों की समीक्षा करता है:

  • प्रॉम्प्ट इंजीनियरिंग (जादुई शब्दों का हैक/Prompt Engineering):
    • यह कैसे काम करता है: "डॉक्टर" टाइप करने के बजाय, आप "एक महिला डॉक्टर" टाइप करते हैं।
    • कैच (Catch): यह एक बैंडेज (band-aid) है। आपको हर एक प्रॉम्प्ट के लिए ऐसा करना होगा। यह रोबोट के दिमाग को ठीक नहीं करता; यह बस एक तस्वीर के लिए उसे धोखा देता है।
  • मॉडल रियलाइनमेंट (पुनः प्रशिक्षण सर्जरी/Model Realignment):
    • यह कैसे काम करता है: हम रोबोट को लेते हैं और उसे नए सबक सिखाते हैं (फाइन-ट्यूनिंग) ताकि वह रूढ़ियों को भूल जाए।
    • कैच: यह महंगा और कठिन है। यह रोबोट को एक पूरी नई डिग्री के लिए वापस स्कूल भेजने जैसा है।
  • एम्बेडिंग मैनिपुलेशन (ब्रेन सर्जरी/Embedding Manipulation):
    • यह कैसे काम करता है: हम रोबोट के आंतरिक गणित (math) को बदलते हैं ताकि शब्द "डॉक्टर" अब मजबूती से "पुरुष" की ओर इशारा न करे। हम वास्तव में रोबोट के मन में अवधारणाओं (concepts) को इधर-उधर करते हैं।
    • कैच: यह सटीक है लेकिन जोखिम भरा है। आप अनजाने में रोबोट की अन्य जानकारियों को खराब कर सकते हैं।
  • डिफ्यूजन गाइडेंस (स्टीयरिंग व्हील/Diffusion Guidance):
    • यह कैसे काम करता है: जैसे-जैसे रोबोट चरण-दर-चरण चित्र बना रहा होता है, हम उस पर नज़र रखते हैं। यदि वह किसी रूढ़ि की ओर बढ़ने लगता है, तो हम उसे धीरे से सही रास्ते पर वापस मोड़ देते हैं।
    • कैच: यह रोबोट को धीमा कर देता है क्योंकि उसे लगातार अपना काम चेक करना पड़ता है।

6. बड़ा निष्कर्ष

शोध पत्र एक आह्वान (call to action) के साथ समाप्त होता है। वर्तमान में, कई शोधकर्ता केवल यह कहते हैं, "देखो, हमने पक्षपात को कम कर दिया!" बिना यह साबित किए कि यह "पर्याप्त अच्छा" है।

लेखक चाहते हैं कि हम केवल अंतर (gap) को मापना बंद करें और नियम निर्धारित करना शुरू करें। वे एक ऐसी दुनिया चाहते हैं जहाँ हम कह सकें, "यह रोबोट प्रमाणित रूप से निष्पक्ष है क्योंकि इसने परीक्षण पास कर लिया है," बजाय इसके कि हम केवल यह कहें, "यह पिछले वाले की तुलना में थोड़ा कम पक्षपाती है।"

संक्षेप में: हमारे पास एक जादुई कलाकार है जो वर्तमान में थोड़ा भेदभावपूर्ण है। हम जानते हैं कि पक्षपात को कैसे पहचानें, लेकिन हमें अनुमान लगाना बंद करना होगा कि "निष्पक्षता" क्या है और स्पष्ट, सख्त नियम बनाने होंगे ताकि यह सुनिश्चित हो सके कि हमारा रोबोट ऐसी दुनिया को चित्रित करे जो सभी का सम्मान करती है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →