IDP-Bench: Benchmarking ability of LLMs to protect personal information in interdependent privacy contexts
यह शोध पत्र IDP-Bench प्रस्तुत करता है, जो परस्पर निर्भर गोपनीयता को संभालने की लार्ज लैंग्वेज मॉडल्स की क्षमता का मूल्यांकन करने के लिए कॉन्टेक्स्टुअल इंटीग्रिटी फ्रेमवर्क पर आधारित पहला बेंचमार्क है, जो यह प्रकट करता है कि हालांकि मॉडल डेटा सह-स्वामित्व को पहचानते हैं, वे विशिष्ट गोपनीयता मापदंडों को पहचानने और जटिल, बहु-पक्षीय संदर्भों में सूचना साझा करने की उपयुक्तता का निर्णय लेने में काफी संघर्ष करते हैं।