FormationEval, an open multiple-choice benchmark for petroleum geoscience
تقدم هذه الورقة البحثية FormationEval، وهو معيار مفتوح للاختيار من متعدد يتكون من 505 سؤالاً عبر سبعة مجالات في علوم الجيولوجيا البترولية، والذي يقيم 72 نموذجاً لغوياً ويكشف أن أفضل النماذج أداءً تحقق دقة تقارب الكمال مع تسليط الضوء على التحديات المستمرة المرتبطة بمجالات محددة وتقليص فجوات الأداء بين النماذج مفتوحة الأوزان والنماذج المغلقة.