🤖 AI
Diagnosing Knowledge Gaps in LLM Tool Use: An Agentic Benchmark for Novel API Acquisition
यह शोध पत्र NovelAPIBench प्रस्तुत करता है, जो एक गतिशील बेंचमार्क है जो यह प्रकट करता है कि कैसे रिट्रीवल (retrieval) और पैरामेट्रिक अनुकूलन (parametric adaptation) बड़े भाषा मॉडलों को नवीन API का उपयोग करने के लिए सुसज्जित करने में पूरक भूमिकाएँ निभाते हैं, यह प्रदर्शित करते हुए कि जहाँ रिट्रीवल अस्थिर सामग्री की आपूर्ति करता है, वहीं फाइन-ट्यूनिंग मुख्य रूप से प्रक्रियात्मक एकीकरण को बढ़ाती है और उपयोग के उदाहरण सबसे महत्वपूर्ण ज्ञान घटक हैं।