Multi-Modal World Model for Physical Robot Interactions: Simultaneous Visual and Tactile Predictions for Enhanced Accuracy
यह शोध पत्र एक मल्टी-मोडल वर्ल्ड मॉडल प्रस्तावित करता है जो स्पर्श संबंधी और दृश्य सूचनाओं को एकीकृत करता है ताकि भौतिक रूप से अस्पष्ट वातावरण में रोबोटिक एक्शन प्रेडिक्शन की सटीकता और मजबूती में महत्वपूर्ण सुधार किया जा सके, जिसे मैग्नेटिक-आधारित टैक्टाइल सेंसर का उपयोग करके एकत्र किए गए दो नवीन डेटासेट्स द्वारा समर्थित किया गया है।