PersianMedQA: Evaluating Large Language Models on a Persian-English Bilingual Medical Question Answering Benchmark
تقدم هذه الورقة PersianMedQA، وهي مجموعة بيانات ضخمة ثنائية اللغة تضم 20,785 سؤالاً من امتحانات طبية باللغة الفارسية تم التحقق منها من قبل خبراء، لتقييم 41 نموذجاً لغوياً كبيراً من أحدث النماذج، وتكشف أنه بينما تتفوق النماذج العامة ذات الأوزان المغلقة على النماذج الفارسية المتخصصة، فإن الفروق الثقافية والسريرية الدقيقة في اللغة الأصلية تظل بالغة الأهمية للاستنتاج الطبي الدقيق.