11611 ورقة بحثية
تجادل هذه الورقة المنظورية بأنه مع استهلاك النماذج اللغوية الكبيرة للمعلومات المسترجعة بشكل متزايد، ينتقل عنق الزجاجة الرئيسي في استرجاع المعلومات نحو تعظيم كثافة الأدلة وقابلية التحقق من خلال نهج يعطي الأولوية لإزالة الضجيج أولاً، وهو ما يتم معالجته عبر إطار عمل تحدي مكون من أربع مراحل وتصنيف شامل لتقنيات تحسين نسبة الإشارة إلى الضجيج عبر مسار الاسترجاع.
تُبين هذه الورقة أن نمذجة إنتاج المنطوق بوصفها خياراً احتماليًا حساسًا للتكلفة من بين بدائل موجهة نحو الأهداف ومولدة بواسطة نموذج لغوي، يكشف أن تقليل المفاجأة بالنسبة لهذه البدائل هو أقوى مؤشر لخيارات المتحدث في الحوار، متفوقًا بذلك على كثافة المعلومات الموحدة والتكاليف القائمة على الطول.
تقدم هذه الورقة ControBench، وهو معيار مرجعي جديد لتحليل الخطاب المثير للجدل يدمج رسوم التفاعل الاجتماعي غير المتجانسة مع دلالات نصية غنية وأيديولوجيات المستخدمين المعلنة ذاتياً من Reddit لتمكين التقييم الواقعي للنماذج حول مواضيع مثل ترامب، والإجهاض، والدين.
تقدم الورقة البحثية AGoQ، وهو إطار عمل لتوزيع التدريب على النماذج اللغوية الكبيرة يتميز بكفاءة الذاكرة، والذي يستخدم تكميم التنشيط المدرك للطبقات وتكميم التدرج بـ 8 بت المحافظ على الدقة لتقليل استخدام الذاكرة بنسبة تصل إلى 52% وتسريع سرعة التدريب بمقدار 1.34 ضعفًا مع الحفاظ على تقارب النموذج ودقته.
تقدم الورقة البحثية إطار عمل SCISENSE، الذي يستفيد من مسارات التفكير الموجهة بالاستشهادات والمهيكلة لتدريب النماذج اللغوية الكبيرة، مما يثبت أن صياغة المعنى المقيدة تعزز بشكل مفاجئ كلاً من الجدة وجودة مخرجات الأبحاث عن طريق تقليل العبء المعرفي على الوكلاء اللاحقين.
تقدم هذه الورقة "مسبار ترميز" (Encoding Probe) يعيد بناء تمثيلات النماذج اللغوية من سمات قابلة للتفسير، مما يقدم منظوراً مكملاً لمسابير فك التشفين التقليدية عبر تمكين المقارنة المباشرة بين السمات والكشف عن كيفية مساهمة السمات اللغوية والصوتية المختلفة في الحالات الداخلية للنموذج.
تقترح الورقة البحثية SC-Taxo، وهو إطار عمل يستفيد من النماذج اللغوية الكبيرة مع آلية توليد عناوين ثنائية الاتجاه لمعالجة عدم الاتساق الهيكلي وعدم المحاذاة الدلالية في توليد التصنيفات العلمية من خلال ضمان الاتساق الدلالي الهرمي.
تقدم هذه الورقة MathArena، وهي منصة تقييم مستمرة الصيانة تتوسع لما وراء المعايير المرجعية الثابتة لتقييم النماذج اللغوية الكبيرة بشكل شامل عبر مهام رياضية متنوعة — بما في ذلك مسائل الأولمبياد، والأسئلة على مستوى الأبحاث، والبراهين الرسمية — مما يثبت أن النماذج الرائدة مثل GPT-5.5 يمكنها الآن حل مشكلات رياضية بالغة الصعوبة مع تسليط الضوء على ضرورة وجود أنظمة تقييم ديناميكية لتتبع التقدم السريع.
تقدم هذه الورقة تفسيراً نظرياً رسمياً لتحسن جودة الانتباه المحلي في نماذج المحولات (transformers) من خلال إثبات أنها توسع بشكل صارم قدرة النموذج التعبيرية على اللغات المنتظمة عبر إضافة عامل زمني ثانٍ، وهو استنتاج أكدته التجارب التي أظهرت أن البنى الهجينة (عالمية-محلية) تتفوق على النماذج العالمية فقط.
تقدم هذه الورقة "الاعتبار الاجتماعي الموجه" (DSR)، وهو إطار عمل جديد لتحليل المشاعر متعدد الأبعاد يستخدم نماذج قائمة على المحولات لتحديد أهداف المشاعر وتقييمها في آن واحد عبر ثلاثة محاور للاعتبار الاجتماعي، مما يتيح رصد التعايش بين المشاعر المؤيدة والمناهضة للمجتمع في وسائل الإعلام عبر الإنترنت والتي تغفل عنها الأدوات التقليدية.