MemFail: Stress-Testing Failure Modes of LLM Memory Systems
यह शोधपत्र MemFail को प्रस्तुत करता है, जो एक नैदानिक बेंचमार्क है जो विशिष्ट विफलता मोड को अलग करने और उनका मूल्यांकन करने के लिए LLM मेमोरी सिस्टम को सारांशीकरण (summarization), भंडारण (storage) और पुनर्प्राप्ति (retrieval) कार्यों में विभाजित करता है, जो समग्र सटीकता मेट्रिक्स से आगे बढ़कर सिस्टम डिज़ाइन के समझौतों (trade-offs) में सूक्ष्म अंतर्दृष्टि प्रदान करता है।