When LLMs Lag Behind: Knowledge Conflicts from Evolving APIs in Code Generation
यह शोध पत्र एक व्यवस्थित अनुभवजन्य अध्ययन प्रस्तुत करता है जो यह प्रदर्शित करता है कि रिट्रीवल-ऑगमेंटेड जनरेशन और संरचित दस्तावेज़ीकरण के उपयोग के बावजूद, लार्ज लैंग्वेज मॉडल्स अक्सर अपने पुराने पैरामीट्रिक ज्ञान की तुलना में बाहरी API अपडेट को प्राथमिकता देने में विफल रहते हैं, जिसके परिणामस्वरूप कोड निष्पादन दर (code executability rates) कम हो जाती है जिसे केवल बड़े मॉडल स्केल और सेल्फ-रिफ्लेक्शन जैसी रीजनिंग-आधारित रणनीतियों द्वारा आंशिक रूप से ही कम किया जा सकता है।