TelcoAgent-Bench: A Multilingual Benchmark for Telecom AI Agents
تقدم هذه الورقة TelcoAgent-Bench، وهو إطار عمل متعدد اللغات للتقييم المرجعي مصمم لتقييم موثوقية واتساق التشغيل لوكلاء النماذج اللغوية الكبيرة في مجال الاتصالات باللغتين الإنجليزية والعربية، كاشفاً أنه بينما تفهم النماذج الحالية مشكلات الاتصالات، إلا أنها تعاني من أجل التنفيذ المتسق لاستكشاف الأخطاء وإصلاحها والاستقرار عبر تنوع السيناريوهات.