ChaosBench-Logic v2: Evaluating LLM Logical Reasoning over Dynamical Systems at Scale
تقدم الورقة البحثية ChaosBench-Logic v2، وهو معيار واسع النطاق وبروتوكول تقييم CARE المصمم للكشف عن إخفاقات الاستدلال المنطقي الحرجة في النماذج اللغوية الكبيرة فيما يتعلق بالأنظمة الديناميكية، حيث وجدت أنه بينما تؤدي النماذج بشكل متوسط في الاستنتاج الصوري، فإنها تعاني بشكل كبير في انتقالات النظام وتظهر ارتباطاً عكسياً منهجياً في أسئلة التفرع.