← नवीनतम पेपर
💻 computer science

Clinical-Prior Guided Multi-Modal Learning with Latent Attention Pooling for Gait-Based Scoliosis Screening

यह शोधपत्र ScoliGait प्रस्तुत करता है, जो एक नया बेंचमार्क डेटासेट और लेटेंट अटेंशन पूलिंग के साथ एक क्लिनिकल-प्रायर गाइडेड मल्टी-मोडल लर्निंग फ्रेमवर्क है, ताकि डेटा लीकेज और मॉडल व्याख्यात्मकता की चुनौतियों का समाधान करते हुए किशोर इडियोपैथिक स्कोलियोसिस के लिए एक सुदृढ़ और व्याख्या योग्य चाल-आधारित (गैट-आधारित) स्क्रीनिंग प्राप्त की जा सके।

मूल लेखक: Dong Chen, Zizhuang Wei, Jialei Xu, Xinyang Sun, Zonglin He, Meiru An, Huili Peng, Yong Hu, Kenneth MC Cheung

प्रकाशित 2026-02-09
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Dong Chen, Zizhuang Wei, Jialei Xu, Xinyang Sun, Zonglin He, Meiru An, Huili Peng, Yong Hu, Kenneth MC Cheung

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप हवा में झूमते हुए एक पेड़ के तने में छिपे घुमाव को पहचानने की कोशिश कर रहे हैं। किशोरों में एडोलेसेंट इडियोपैथिक स्कोलियोसिस (AIS) की जांच करते समय डॉक्टर मूल रूप से यही करते हैं, जो कि एक ऐसी स्थिति है जहाँ रीढ़ की हड्डी बगल की ओर झुक जाती है। आमतौर पर, इसके लिए शारीरिक परीक्षण या एक्स-रे (जिसमें रेडिएशन का उपयोग होता है) की आवश्यकता होती है। लेकिन क्या होगा यदि हम केवल एक वीडियो में किसी बच्चे को गलियारे में चलते हुए देखकर बता सकें कि उनकी रीढ़ टेढ़ी है या नहीं?

यही इस शोध पत्र का लक्ष्य है, और लेखकों ने ठीक ऐसा ही करने के लिए एक नया "स्मार्ट जासूस" सिस्टम बनाया है जिसे ScoliGait कहा जाता है। उन्होंने इसे कैसे किया, यहाँ सरल भागों में दिया गया है:

1. समस्या: "नकलची" वाली गलती

AI का उपयोग करने के पिछले प्रयास नकल करने वाले छात्र की तरह थे। उन्होंने बच्चों के वीडियो पर AI को प्रशिक्षित किया, लेकिन टेस्ट सेट में वही बच्चे फिर से शामिल थे। AI ने खराब रीढ़ को पहचानना नहीं सीखा; उसने बस यह याद कर लिया कि "ओह, यह लाल शर्ट वाला लड़का है, मैंने इसे पहले देखा है।"

लेखकों ने ScoliGait नामक एक बिल्कुल नया डेटासेट बनाकर इस समस्या को ठीक किया।

  • उपमा: कल्पना कीजिए कि एक शिक्षक गणित की परीक्षा ले रहा है। पुराने तरीके में, शिक्षक उन्हीं छात्रों को वही प्रश्न दो बार देता था। इस नए तरीके में, शिक्षक छात्रों के एक पूरी तरह से अलग समूह को परीक्षा देता है जिन्होंने पहले कभी वे प्रश्न नहीं देखे हैं। यह साबित करता है कि छात्रों ने वास्तव में गणित सीखा है, न कि केवल उत्तर रटे हैं।
  • परिणाम: उनके पास "अध्ययन" के लिए 1,572 चलने के वीडियो हैं और "फाइनल एग्जाम" के लिए बिल्कुल अलग लोगों के 300 वीडियो हैं। सटीकता सुनिश्चित करने के लिए प्रत्येक वीडियो की जांच "गोल्ड स्टैंडर्ड" (एक एक्स-रे माप जिसे कोब एंगल कहा जाता है) के विरुद्ध की गई है ताकि लेबल 100% सटीक हों।

2. समाधान: एक तीन-परत वाला जासूस

AI केवल वीडियो नहीं देखता है; यह पहेली को सुलझाने के लिए तीन अलग-अलग "इंद्रियों" का उपयोग करता है, ठीक वैसे ही जैसे एक जासूस आवर्धक लेंस (magnifying glass), गवाह के बयान और एक मानचित्र का उपयोग करता है।

  • इंद्रिय 1: वीडियो (आंखें)
    AI चलने के वीडियो को देखता है, ठीक वैसे ही जैसे एक इंसान देखता है।
  • इंद्रिय 2: टेक्स्ट (गवाह)
    AI डॉक्टरों द्वारा लिखे गए एक संक्षिप्त विवरण को पढ़ता है, जैसे "हाथ असमान रूप से हिल रहे हैं" या "धड़ घूम रहा है।" यह AI को यह समझने में मदद करता है कि क्या देखना है, बजाय इसके कि वह केवल अनुमान लगाए।
  • इंद्रिय 3: नॉलेज मैप (ब्लूप्रिंट)
    यह सबसे दिलचस्प हिस्सा है। लेखकों ने 238 विशिष्ट शारीरिक गतिविधियों (जैसे कि घुटने कितनी दूर तक फैले हुए हैं या हाथ कैसे हिलते हैं) का एक "मानचित्र" बनाया है।
    • उपमा: एक सामान्य AI के बारे में सोचें जो एक अस्त-व्यस्त कमरे को देखकर कहता है, "यह बिखरा हुआ लग रहा है।" यह नया AI एक चेकलिस्ट (नॉलेज मैप) का उपयोग करता है जो कहता है, "क्या कुर्सी झुकी हुई है? क्या कालीन सिकुड़ा हुआ है? क्या लैंप टेढ़ा है?" यह गति को उन विशिष्ट, मापने योग्य भागों में तोड़ देता है जिनकी डॉक्टरों को वास्तव में परवाह होती है।

3. सीक्रेट सॉस: "लेटेंट अटेंशन पूलिंग" (Latent Attention Pooling)

आप एक वीडियो, एक टेक्स्ट विवरण और एक जटिल चेकलिस्ट को एक स्मार्ट निर्णय में कैसे मिला सकते हैं?

लेखकों ने लेटेंट अटेंशन पूलिंग नामक एक विधि का आविष्कार किया।

  • उपमा: कल्पना कीजिए कि आप एक ऑर्केस्ट्रा का संचालन कर रहे हैं। आपके पास वायलिन सेक्शन (वीडियो), ट्रम्पेट सेक्शन (टेक्स्ट), और पर्कशन सेक्शन (नॉलेज मैप) है। यदि आप उन सभी को एक साथ बजने देंगे, तो वह केवल शोर होगा।
  • नवाचार: यह नई विधि एक ऐसे कंडक्टर की तरह है जिसके पास एक "जादुई कान" है। वह हर एक वाद्य यंत्र को सुनता है और निर्णय लेता है, "अभी ट्रम्पेट सबसे महत्वपूर्ण नोट बजा रहा है, इसलिए मैं उस पर ध्यान केंद्रित करूँगा," या "पर्कशन मुख्य लय है, इसलिए मैं उसे बढ़ा दूँगा।" यह अंतिम निर्णय लेने के लिए तीनों स्रोतों से सबसे महत्वपूर्ण सुरागों को गतिशील रूप से चुनता है।

4. यह क्यों मायने रखता है: "ब्लैक बॉक्स" का अंत

पुराने AI मॉडल अक्सर "ब्लैक बॉक्स" होते हैं। आप एक वीडियो डालते हैं, और वह कहता है "हाँ, स्कोलियोसिस है," लेकिन आपको पता नहीं चलता कि क्यों। डॉक्टर मशीन पर तब तक भरोसा नहीं कर सकते जब तक वे उसके तर्क को समझ न लें।

  • बड़ी उपलब्धि: क्योंकि यह सिस्टम नॉलेज मैप का उपयोग करता है, इसलिए यह अपना काम दिखा सकता है।
  • उपमा: केवल यह कहने के बजाय कि "उत्तर 42 है," AI कहता है, "उत्तर 42 है क्योंकि तीसरे सेकंड पर बायां हाथ दाएं हाथ की तुलना में 5 डिग्री कम हिला था।"
  • लाभ: एक डॉक्टर AI की "चेकलिस्ट" को देख सकता है और कह सकता है, "आह, मैं समझ गया। इसने हाथ के हिलने को चिह्नित किया। यह सही लगता है।" यह AI को एक रहस्यमयी बॉक्स के बजाय एक साथी बनाता है।

5. परिणाम

जब उन्होंने इस नए सिस्टम का "फाइनल एग्जाम" (300 नए लोग) पर परीक्षण किया:

  • इसने 70% सटीकता प्राप्त की, जो इस विशिष्ट प्रकार के परीक्षण के लिए अब तक का सबसे अच्छा परिणाम था।
  • यह स्कोलियोसिस के वास्तविक मामलों को पकड़ने में पिछले तरीकों की तुलना में बहुत बेहतर था, जो अक्सर उन्हें मिस कर देते थे।
  • इसने साबित किया कि वीडियो, टेक्स्ट और "चेकलिस्ट" (नॉलेज मैप) को मिलाने से केवल वीडियो का उपयोग करने की तुलना में बेहतर परिणाम मिलते हैं।

संक्षेप में: लेखकों ने एक नया, निष्पक्ष परीक्षण (ScoliGait) और एक स्मार्ट AI जासूस बनाया है जो स्पाइनल समस्याओं को पहचानने के लिए एक चेकलिस्ट, एक वीडियो और एक विवरण का उपयोग करता है। यह पहले की तुलना में अधिक सटीक है, और अन्य AI के विपरीत, यह स्पष्ट रूप से समझा सकता है कि इसने अपना निर्णय क्यों लिया, जिससे यह एक ऐसा उपकरण बन जाता है जिस पर डॉक्टर वास्तव में भरोसा कर सकते हैं।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →