← नवीनतम पेपर
⚡ electrical engineering

VLM-VPI: A Vision-Language Reasoning Framework for Improving Automated Vehicle-Pedestrian Interactions

VLM-VPI एक मल्टीमॉडल रीजनिंग फ्रेमवर्क है जो विजुअल कॉन्टेक्स्ट और आयु-विशिष्ट व्यवहार संबंधी परिवर्तनशीलता के बारे में तर्क देकर स्वायत्त वाहन-पैदल यात्री इंटरैक्शन की सुरक्षा और दक्षता में सुधार करने के लिए विजन-लैंग्वेज मॉडल्स को डेमोग्राफिक-एडेप्टिव कंट्रोल के साथ एकीकृत करता है।

मूल लेखक: Qingwen Pu, Kun Xie, Yuxiang Liu

प्रकाशित 2026-04-28
📖 4 मिनट में पढ़ें☕ कॉफ़ी ब्रेक में पढ़ें

मूल लेखक: Qingwen Pu, Kun Xie, Yuxiang Liu

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक व्यस्त शहर में कार चला रहे हैं। आप सड़क के किनारे एक व्यक्ति को खड़े देखते हैं। क्या वे सड़क पार करना चाहते हैं? क्या वे अपने फोन को देख रहे हैं? क्या वह एक छोटा बच्चा है जो अचानक सड़क की ओर दौड़ सकता है, या कोई बुजुर्ग व्यक्ति है जो धीरे चल सकता है?

वर्तमान स्वायत्त कारें (self-driving cars) उन ड्राइवरों की तरह हैं जो केवल स्पीडोमीटर और रूलर (पैमाने) को देखते हैं। वे देखते हैं कि एक व्यक्ति 3 मील प्रति घंटे की गति से चल रहा है और सोचते हैं, "ठीक है, वे 3 मील प्रति घंटे की गति से चल रहे हैं।" लेकिन वे उस व्यक्ति को "देखते" नहीं हैं। वे सूक्ष्म सामाजिक संकेतों को चूक जाते हैं—जैसे हिचकिचाहट, आंखों का संपर्क, या यह तथ्य कि एक बच्चा एक वयस्क की तुलना में बहुत अधिक अप्रत्याशित होता है। इससे दो बड़ी समस्याएं होती हैं: कार बिना किसी कारण के अचानक ब्रेक लगा देती है (जिससे सभी परेशान होते हैं), या वह ब्रेक लगाने में बहुत देर कर देती है (जो खतरनाक है!)।

यह शोध पत्र VLM-VPI पेश करता है, जो स्वायत्त कारों के लिए एक नया "मस्तिष्क" है जो केवल गति मापने से आगे बढ़कर वास्तव में सामाजिक संदर्भ (social context) को समझने की ओर बढ़ता है।


"स्मार्ट ब्रेन" की तीन परतें

इसे ठीक करने के लिए, शोधकर्ताओं ने तीन अलग-अलग परतों वाला एक सिस्टम बनाया है। इसे एक मानव चालक की विचार प्रक्रिया की तरह समझें:

1. आँखें और कान (Multimodal Perception)

केवल मानचित्र पर बिंदुओं को देखने के बजाय, यह परत एक हाई-डेफिनिशन कैमरे और स्टॉपवॉच की तरह कार्य करती है। यह इस बात को कैप्चर करती है कि व्यक्ति कैसा दिखता है और वह वास्तव में कैसे चल रहा है। यह एक "चलती हुई वस्तु" देखने और "लाल शर्ट में एक छोटे लड़के को सड़क की ओर दौड़ते हुए" देखने के बीच का अंतर है।

2. "कॉमन सेंस" सोचने वाला (Reasoning Layer)

यही असली सफलता है। शोधकर्ताओं ने कारों को "कॉमन सेंस" देने के लिए लार्ज लैंग्वेज मॉडल्स (ChatGPT जैसी तकनीक) का उपयोग किया है।

  • उपमा: एक प्रशिक्षु ड्राइवर (trainee driver) की कल्पना करें। उन्हें केवल गणित के सूत्रों की नियमावली देने के बजाय, आप उन्हें वास्तविक लोगों के छह वीडियो दिखाते हैं: "इस व्यक्ति को देखें? वे कार की ओर देख रहे हैं, इसलिए वे प्रतीक्षा करेंगे। इस व्यक्ति को देखें? वे विचलित हैं, इसलिए वे सड़क पार कर सकते हैं।"
  • इन "वास्तविक दुनिया के उदाहरणों" को AI को दिखाने से, कार तर्क करना सीखती है: "व्यक्ति एक बच्चा है, और वह कार से दूर देख रहा है; इसलिए, मुझे अतिरिक्त सावधानी बरतनी चाहिए।"

3. अनुकूलनशील रिफ्लेक्स (Tiered Safety Control)

एक बार जब कार स्थिति को "समझ" लेती है, तो वह केवल एक ही तरीके से ब्रेक नहीं लगाती। यह डेमोग्राफिक-एडेप्टिव कंट्रोल (जनसांख्यिकीय-अनुकूल नियंत्रण) का उपयोग करती है।

  • उपमा: सोचिए कि आप अलग-अलग लोगों के आसपास कैसे गाड़ी चलाते हैं। यदि आप एक पेशेवर एथलीट को देखते हैं, तो आप आश्वस्त महसूस कर सकते हैं कि वे अनुमानित रूप से चलेंगे। लेकिन यदि आप एक छोटे बच्चे या बुजुर्ग व्यक्ति को देखते हैं, तो आप स्वाभाविक रूप से उन्हें बहुत अधिक जगह देते हैं और बहुत पहले ही ब्रेक लगाने के लिए तैयार हो जाते हैं।
  • कार बिल्कुल यही करती है। यह एक "सुरक्षा गुणक" (safety multiplier) लागू करती है। एक बच्चे के लिए, यह उनके चारों ओर एक बहुत बड़ा "सुरक्षा घेरा" बनाती है। एक वयस्क के लिए, यह एक मानक बफर का उपयोग करती है। यह कार को विभिन्न आयु समूहों द्वारा उत्पन्न किए जाने वाले विशिष्ट जोखिमों के प्रति "अंधा" होने से रोकता है।

क्या यह वास्तव में काम करता है? (परिणाम)

शोधकर्ताओं ने इसका परीक्षण एक उच्च-तकनीकी सिमुलेशन (CARLA) और वास्तविक दुनिया के वीडियो डेटा के साथ किया। परिणाम प्रभावशाली थे:

  • बेहतर अनुमान: पुरानी पद्धतियों की तुलना में कार यह अनुमान लगाने में बहुत बेहतर थी कि कोई व्यक्ति सड़क पार करेगा या प्रतीक्षा करेगा (92.3% सटीकता)।
  • कम "फॉल्स अलार्म": क्योंकि कार वास्तव में यह समझती है कि कोई व्यक्ति फुटपाथ पर रुकने का इरादा रखता है या नहीं, इसलिए यह अनावश्यक रूप से ब्रेक नहीं लगाती। इससे यातायात सुचारू रूप से चलता रहता है।
  • उच्च सुरक्षा: जब इसकी सबसे अधिक आवश्यकता थी, तब कार "नियर-मिसेस" (बच निकलने वाली स्थितियों) से बचने में बहुत बेहतर थी। इसने "सुरक्षा बफर" (कार और व्यक्ति के बीच का समय) को काफी बढ़ा दिया, विशेष रूप से बच्चों और बुजुर्गों के लिए।

मुख्य निष्कर्ष

संक्षेप में, यह शोध पत्र स्वायत्त तकनीक को "गणित-आधारित ड्राइविंग" (दूरी की गणना करना) से "सामाजिक-आधारित ड्राइविंग" (लोगों को समझना) की ओर ले जाता है। यह एक ऐसे रोबोट और एक ऐसे ड्राइवर के बीच का अंतर है जो सड़क के "अलिखित नियमों" को समझता है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →