ComMem: Complementary Memory Systems for Test-Time Adaptation of Vision-Language Models
हिप्पोकैम्पस और नियोकोर्टेक्स की पूरक भूमिकाओं से प्रेरित होकर, प्रस्तावित ComMem ढांचा एक तेजी से अनुकूलित होने वाले विजुअल कैश (visual cache) और एक धीमी गति से एकीकृत होने वाले टेक्स्टुअल प्रोटोटाइप सिस्टम का उपयोग करके विजन-लैंग्वेज मॉडल्स के लिए टेस्ट-टाइम एडेप्टेशन को बढ़ाता है, जो क्रॉस-मोडल निरंतरता को संयुक्त रूप से अनुकूलित करता है और विविध वितरण बदलावों (distribution shifts) में बेहतर प्रदर्शन प्राप्त करता है।