12021 ورقة بحثية
تقدم هذه الورقة طريقةً خفيفة الوزن، وخالية من قيود البنية، وتعتمد على النص فقط لتكييف نماذج التعرف التلقائي على الكلام (ASR) القائمة على النماذج اللغوية الكبيرة (LLM)، حيث تضع عملية التكييف مع المجال في إطار مهمة لإزالة الضجيج من النصوص، مما يحافظ بفعالية على المحاذاة بين الكلام والنص مع تحقيق تحسينات كبيرة في الأداء مقارنة بالنهج الرائدة الحالية.
تقترح هذه الورقة البحثية "ضبط حالة الكيان" (EST)، وهو إطار عمل غير مرتبط بنوع المشفر، يعالج أوجه القصور في التنبؤ بالرسوم البيانية المعرفية الزمنية عديمة الحالة من خلال الحفاظ على مخزن مؤقت للحالة العالمية واستخدام تصميم حلقة مغلقة لمواءمة التبعيات الهيكلية مع التطور الزمني، مما يحقق أداءً هو الأفضل في فئته في التنبؤات طويلة المدى.
تقيم هذه الورقة تسعة من النماذج اللغوية الاستدلالية الرائدة في ظل هجمات عدائية متعددة الجولات، كاشفةً أنه بينما توفر قدرات الاستدلال متانة جزئية مقارنة بالنماذج القياسية، إلا أنها تفرض نقاط ضعف فريدة مثل الشك الذاتي والامتثال الاجتماعي، وتجعل الدفاعات القائمة على الثقة غير فعالة بسبب الإفراط في الثقة في مسارات الاستدلال الممتدة.
تُثبت هذه الورقة أن نماذج الكلام ذات التعلم الذاتي تشفر الكلام باستخدام ناقلات تركيبية قابلة للتفسير فونولوجياً تسمح بعمليات حسابية خطية، حيث يمكن لإضافة أو تغيير حجم ناقلات سمات معينة (مثل التهجئة الصوتية/الجهر) أن يحول نظامياً فونيماً واحداً إلى آخر عبر 96 لغة.
تُظهر هذه الورقة أن تدريب النماذج اللغوية الكبيرة على استخدام الاستدلال المنظم يحسن قدرتها على التوافق مع الآراء السياسية عبر السياقات الأمريكية والأوروبية والسويسرية، رغم أنه لا يقضي على التحيز تماماً، مما يؤسس بذلك لخط أساس جديد لبناء توائم رقمية سياسية وفية.
تقدم هذه الورقة البحثية OpenSanctions Pairs، وهي معيار مرجعي لمطابقة الكيانات واسع النطاق مستمد من بيانات عقوبات حقيقية، وتُظهر أن النماذج اللغوية الكبيرة تتفوق بشكل كبير على الأنظمة القائمة على القواعد المستخدمة في بيئات الإنتاج من حيث الدقة، مع تسليط الضوء على أن التحسينات المستقبلية يجب أن تركز على مكونات خط المعالجة مثل الحجب والتجميع بدلاً من المطابقة الثنائية وحدها.
تقدم هذه الورقة قوانين القياس لفك التشفير الاستنتاجي (SDDS)، وهو إطار نظري يربط تحليلياً بين المعلمات الفائقة للنماذج اللغوية الكبيرة المدربة مسبقاً وبين إنتاجية الاستدلال، مما يتيح التنبؤ بتكوينات النظام المثلى دون الحاجة إلى تدريب تجريبي مكلف.
تقدم هذه الورقة مجموعة بيانات التقييم CR-Bench، ومسار التقييم دقيق التفاصيل CR-Evaluator، لتقييم وكلاء مراجعة الكود وكشف المقايضة الحرجة بين حل المشكلات والنتائج الزائفة التي تعيق فائدتهم في العالم الحقيقي حالياً.
تقدم الورقة البحثية REOPOLD، وهو إطار عمل مبتكر يفسر التقطير داخل السياسة (on-policy distillation) كتحسين للسياسة ويقوم بتثبيته من خلال قيود مخففة وآليات مكافأة ديناميكية، محققاً كفاءة أعلى بكثير في أخذ العينات وتمكيناً للنماذج الأصغر من مضاهاة أداء النماذج الأكبر في الاستنتاج عبر مهام متنوعة.
تقدم هذه الورقة دراسة منهجية حول التعرف التلقائي على الكلام لمرض هنتنغتون باستخدام مجموعة بيانات سريرية جديدة عالية الدقة، مظهرةً أن التكيف الخاص بمرض هنتنغتون والإشراف المساعد القائم على المؤشرات الحيوية يقللان بشكل كبير من معدلات الخطأ في الكلمات ويعيدان تشكيل أنماط الخطأ وفقاً لشدة المرض.