MultiHaystack: Benchmarking Multimodal Retrieval and Reasoning over 40K Images, Videos, and Documents
تقدم الورقة البحثية MultiHaystack، وهو معيار مرجعي جديد يضم أكثر من 46,000 وثيقة متعددة الوسائط، وصوراً، وفيديوهات لتقييم الفجوة الحرجة بين الاسترجاع والاستدلال في النماذج اللغوية الكبيرة متعددة الوسائط، كاشفةً أن الأنظمة الحالية تعاني بشكل كبير عندما يُطلب منها تحديد الأدلة ضمن مجموعات بيانات ضخمة وغير متجانسة بدلاً من تزويدها بها مباشرة.