TRACER: Persistent Regularization for Robust Multimodal Finetuning
यह शोध पत्र TRACER को प्रस्तुत करता है, जो एक सुदृढ़ मल्टीमॉडल फाइनट्यूनिंग विधि है जो निरंतर नियमितीकरण (persistent regularization) के लिए एक वेटेड मूविंग एवरेज (WMA) शिक्षक का उपयोग करके कैटास्ट्रोफिक फॉरगेटिंग और टीचर कोलैप्स को संबोधित करती है, जिससे आउट-ऑफ-डिस्ट्रीब्यूशन सटीकता और अंशांकन (calibration) में महत्वपूर्ण सुधार होता है।