← नवीनतम पेपर
🤖 machine learning

Learning to Assess Danger from Movies for Cooperative Escape Planning in Hazardous Environments

यह शोध पत्र आपदा डेटासेट बनाने के लिए मूवी डेटा का लाभ उठाकर और खतरे के अनुमान तथा सहयोगात्मक पलायन योजना में सुधार करने के लिए विजुअल और लैंग्वेज इनपुट को फ्यूज करने वाले एक मल्टी-मोडल बेयसियन फ्रेमवर्क का प्रस्ताव देकर, खतरनाक वातावरण के लिए रोबोटों को प्रशिक्षित करने की चुनौतियों का समाधान करता है।

मूल लेखक: Vikram Shree, Sarah Allen, Beatriz Asfora, Jacopo Banfi, Mark Campbell

प्रकाशित 2026-07-22
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Vikram Shree, Sarah Allen, Beatriz Asfora, Jacopo Banfi, Mark Campbell

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

एक ऐसी दुनिया की कल्पना करें जहाँ रोबोट आपके भरोसेमंद साथी हों, न कि केवल फर्श साफ करने या पिज्जा डिलीवर करने के लिए, बल्कि वास्तव में डरावने कामों के लिए: जैसे कि आपको जलती हुई इमारत से बाहर निकालना या भूकंप से तबाह हुए शहर में आपका मार्गदर्शन करना। यह सर्च एंड रेस्क्यू (SaR) का क्षेत्र है, जो रोबोटिक्स का एक उच्च-जोखिम वाला कोना है जहाँ मशीनें जान बचाने की कोशिश करती हैं। लेकिन यहाँ एक पेंच है: आप किसी स्कूल में असली आग लगाकर या किसी इमारत को ढहने तक हिलाकर रोबोट को प्रशिक्षित नहीं कर सकते। यह बहुत खतरनाक है, बहुत महंगा है, और सच कहें तो, एक बुरा विचार है। इसलिए, वैज्ञानिक रोबोट को यह सिखाने में फंस गए हैं कि "खतरा" क्या दिखता है, इसके लिए वे उबाऊ कंप्यूटर सिमुलेशन का उपयोग करते हैं जो अक्सर नकली लगते हैं, या इस उम्मीद में रहते हैं कि रोबोट इसे चलते-चलते खुद समझ लेगा। बड़ा सवाल यह है: हम एक रोबोट को जीवन के लिए खतरा पैदा करने वाली स्थिति को पहचानने के लिए कैसे सिखाएं, बिना खुद मरते हुए प्रक्रिया में आए? इसका उत्तर रोबोट जो देखता है, इंसान जो कहता है, और बहुत सारे हॉलीवुड जादू के चतुर मिश्रण में छिपा है।

यह शोध पत्र, जिसका शीर्षक "लर्निंग टू असेस डेंजर फ्रॉम मूवीज फॉर कोऑपरेटिव एस्केप प्लानिंग इन हेज़र्डस एनवायरनमेंट्स" है, एक शानदार समाधान प्रस्तावित करता है। लेखकों ने, जो कॉर्नेल और एमआईटी के शोधकर्ताओं की एक टीम है, महसूस किया कि जबकि हम प्रशिक्षण के लिए वास्तविक आपदाओं की फिल्में नहीं बना सकते, हमारे पास हजारों फिल्में और टीवी शो मौजूद हैं जो नकली आग, बाढ़ और मलबे से भरे हुए हैं। उन्होंने इन फिल्मों को एक विशाल, मुफ्त प्रशिक्षण मैदान के रूप में उपयोग करने का निर्णय लिया। उन्होंने फिल्मों और शो के आपदा दृश्यों से 1,002 चित्र निकालकर एक डेटासेट बनाया, फिर इंटरनेट पर मानव श्रमिकों से प्रत्येक तस्वीर को 1 से 5 के पैमाने पर (कम से "अत्यधिक" तक) रेटिंग देने और उन कीवर्ड्स को लिखने के लिए कहा जो इसे डरावना बनाते थे, जैसे कि "धुआं", "आग", या "मलबे का गिरना"।

लेकिन यह शोध पत्र केवल मूवी स्टिल्स (चित्रों) को इकट्ठा करने तक ही सीमित नहीं है। यह एक "सहयोगी" (cooperative) प्रणाली पेश करता है जहाँ एक रोबोट और एक इंसान मिलकर बचने के लिए काम करते हैं। रोबोट के पास एक कैमरा (विजुअल परसेप्शन) होता है, और इंसान के पास एक आवाज (लैंग्वेज परसेप्शन) होती है। रोबोट धुआं देखकर खतरे के स्तर का अनुमान लगा सकता है, लेकिन इंसान चिल्ला सकता है, "यह ढह रहा है!" या "हर तरफ पानी ही पानी है!" शोध पत्र का मुख्य नवाचार एक बेयसियन फ्यूजन फ्रेमवर्क (Bayesian fusion framework) है—जो गणित का एक शानदार तरीका है, जिसका अर्थ है कि वे अपने अंतिम अनुमान को अधिक स्मार्ट और सटीक बनाने के लिए रोबोट के विजुअल गेस और इंसान के वर्बल गेस को मिलाते हैं। इसे ऐसे समझें जैसे दो जासूस एक रहस्य को सुलझा रहे हों: एक सुराग देखता है, दूसरा गवाह को सुनता है, और साथ मिलकर वे मामले को अकेले की तुलना में तेजी से और बेहतर तरीके से सुलझाते हैं।

शोधकर्ताओं ने एक सिम्युलेटेड दुनिया में इस विचार का परीक्षण किया, जैसे कि एक स्कूल का वीडियो गेम लेवल जिसमें 54 अलग-अलग स्थान (नोड्स) और दो निकास द्वार थे। उन्होंने यह देखने के लिए 1,000 सिमुलेशन चलाए कि उनकी टीम कितनी अच्छी तरह बच सकती है। परिणाम उत्साहजनक थे: जब रोबोट ने केवल अपने कैमरे का उपयोग किया, तो वह ठीक था। जब उसने केवल इंसान के शब्दों का उपयोग किया, तो वह और भी खराब था। लेकिन जब उन्होंने रोबोट के विजन और इंसान के भाषा इनपुट दोनों को मिला दिया, तो टीम की सफलता दर बढ़ गई। विशेष रूप से, संयुक्त दृष्टिकोण का उपयोग करने से मिशन की सफलता दर में औसतन 19 प्रतिशत अंक का सुधार हुआ, जो एक बुनियादी रोबोट की तुलना में बेहतर था जो वास्तव में खतरे को समझे बिना केवल सबसे छोटे रास्ते पर जाने की कोशिश करता है।

यह शोध पत्र इस बात की भी गहराई से जांच करता है कि कंप्यूटर मॉडल मूवी डेटा से कितनी अच्छी तरह सीखे। उन्होंने यह देखने के लिए कई प्रसिद्ध AI मॉडलों (जैसे VGGNet और ResNet) का परीक्षण किया कि आपदा की फोटो देखकर खतरे के स्तर का अनुमान लगाने में कौन सा सबसे अच्छा है। उन्होंने पाया कि VGGNet-13 चैंपियन था, जिसने लगभग 47.5% बार (Top-1 सटीकता) खतरे की रेटिंग सही बताई और केवल एक स्तर की गलती की बार-बार 79.2% बार। जब उन्होंने इसमें मानव कीवर्ड्स को जोड़ा, तो सटीकता और भी बेहतर हो गई। उदाहरण के लिए, रोबोट के विजन को इंसान के मात्र 5 शब्दों के साथ मिलाने से सटीकता बढ़कर 48.5% हो गई और त्रुटि (RMSE) घटकर 1.03 रह गई।

महत्वपूर्ण रूप से, शोध पत्र अपने दावों के प्रति सावधान है। यह नहीं कहता कि यह प्रणाली कल भूकंप के समय तैनात करने के लिए तैयार है। परिणाम सिमुलेशन से आए हैं, वास्तविक दुनिया की आपदाओं से नहीं। लेखक स्पष्ट रूप से उल्लेख करते हैं कि जबकि "फुल नॉलेज" परिदृश्य (जहाँ रोबोट खतरे के नक्शे को पूरी तरह से जानता है) सैद्धांतिक रूप से सबसे अच्छा है, उनका मल्टी-मोडल दृष्टिकोण कभी-कभी सिमुलेशन में इससे भी बेहतर प्रदर्शन करता है। वे सुझाव देते हैं कि ऐसा इसलिए हो सकता है क्योंकि फ्यूज किए गए डेटा के कारण रोबोट थोड़ा अधिक सतर्क रहता है, जिससे वह जोखिम भरे शॉर्टकट के बजाय सुरक्षित और अधिक रूढ़िवादी रास्ते चुनता है।

यह शोध पत्र इस विचार को भी खारिज करता है कि मानवीय इनपुट हमेशा आवश्यक है। उन्होंने सिस्टम को इस तरह से डिजाइन किया है कि यदि इंसान बोलने में असमर्थ हो (शायद सदमे या चोट के कारण), तो रोबलेट केवल अपने कैमरे से खतरे का आकलन कर सके। हालांकि, डेटा दिखाता है कि मानवीय भाषा इनपुट जोड़ने से प्रदर्शन में काफी वृद्धि होती है। उन्होंने यह भी पाया कि जबकि विजुअल डेटा समृद्ध और विस्तृत है, मानवीय भाषा एक अनूठा संदर्भ जोड़ती है जिसे रोबोट मिस कर सकता है, जैसे कि यह समझना कि एक "टूटी हुई" खिड़की एक "ढहती हुई" छत की तुलना में कम खतरनाक है।

अंत में, यह शोध सुझाव देता है कि हॉलीवुड के विजुअल डेटा को उधार लेकर और एक स्मार्ट गणितीय ढांचे के माध्यम से मानवीय अंतर्ज्ञान को जोड़कर, हम ऐसे रोबोट बना सकते हैं जो खतरे को समझने में बेहतर हों। इसका मतलब केवल यह नहीं है कि रोबोट आग को देखता है; इसका मतलब है कि वह समझता है कि आग क्यों डरावनी है और वह सुरक्षित निकलने का रास्ता खोजने के लिए इंसान के साथ मिलकर काम कर सकता है। लेखक निष्कर्ष निकालते हैं कि यह सहयोगात्मक दृष्टिकोण, जहाँ रोबोट और इंसान एक-दूसरे की इंद्रियों पर भरोसा करते हैं, भविष्य के खोज और बचाव मिशनों को अधिक सफल बनाने की कुंजी हो सकता है, जो आपदा की अराजकता को सुरक्षा के एक सुलभ मार्ग में बदल सकता है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →