SPARTA: Scalable and Principled Benchmark of Tree-Structured Multi-hop QA over Text and Tables
تقدم هذه الورقة SPARTA، وهو إطار عمل قابل للتوسع ومنهجي يقوم تلقائياً بتوليد معايير قياسية لأسئلة وأجوبة الجداول والنصوص واسعة النطاق وعالية الدقة، تتضمن استدلالاً عميقاً متعدد الخطوات وعمليات تجميع معقدة، مما يكشف عن فجوات أداء كبيرة في النماذج الحالية المتطورة مقارنة بالمعايير القياسية الموجودة.