EDU-CIRCUIT-HW: Evaluating Multimodal Large Language Models on Real-World University-Level STEM Student Handwritten Solutions
تقدم هذه الورقة EDU-CIRCUIT-HW، وهي مجموعة بيانات تضم أكثر من 1,300 حل مكتوب بخط اليد لمستويات جامعية في مجالات العلوم والتكنولوجيا والهندسة والرياضيات (STEM) حقيقية، للكشف عن فجوات موثوقية كبيرة في النماذج اللغوية الكبيرة متعددة الوسائط الحالية في التعرف على المنطق المعقد المكتوب بخط اليد، وتُظهر أن الاستفادة من أنماط الخطأ المحددة مع حد أدنى من التدخل البشري يمكن أن تعزز بفعالية متانة التصحيح الآلي.