IRC-Bench: Recognizing Entities from Contextual Cues in First-Person Reminiscences
تقدم هذه الورقة IRC-Bench، وهو معيار مرجعي جديد صُمم لتقييم التعرف على الكيانات المشار إليها ضمنياً في سرديات الاستذكار بضمير المتكلم من خلال اختبار النماذج على استنتاج الأهداف من خلال أدلة سياقية مبعثرة بدلاً من التلميحات الصريحة، حيث أظهرت النتائج أن نموذج Llama 3.1 8B المعدل بتقنية QLoRA يتفوق في بيئات العالم المفتوح بينما يتفوق نموذج DPR المضبوط بدقة في استرجاع العالم المغلق.