11158 ورقة بحثية
تقدم الورقة البحثية TimelineReasoner، وهو إطار عمل مبتكر يسخر نماذج الاستدلال الكبيرة لتحويل تلخيص الخط الزمني من مجرد توليد سلبي إلى عملية نشطة مكونة من مرحلتين من الإدراك الشامل واستكشاف التفاصيل، مما يحسن الدقة والتغطية والتماسك بشكل كبير مقارنة بالطرق الحالية.
تقترح هذه الورقة "الإشراف على العملية القابل للتحقق" (VPS)، وهو إطار عمل لما بعد التدريب يعمل على تحسين دقة التنبؤ وجودة الاستدلال بشكل مشترك من خلال مكافآت تكيفية على مستوى الخطوات، مما يثبت أنه على عكس التعلم المعزز القائم على الدقة فقط والذي يؤدي إلى تدهور سلامة الاستدلال، فإن VPS يمكّن النماذج اللغوية من تحقيق كل من الدقة العالية والاستدلال السليم والمتسق في المجالات القابلة للتحقق مثل الشطرنج.
تقدم الورقة البحثية ToolWeave، وهو إطار عمل هيكلي يعمل على توليد حوارات استدعاء الأدوات متعددة الأدوار والواقعية من خلال فرض تبعيات الأدوات وتتبع مصدر المعلمات بدقة متناهية، مما يؤدي إلى تحسين جودة التفاعل متعدد الخطوات بشكل كبير وتحقيق أداء فائق في الاختبارات المرجعية للنماذج اللغوية الكبيرة الضبطية مقارنة بمجموعات البيانات الحالية.
تجادل هذه الورقة بأن عدالة النماذج اللغوية الكبيرة يجب أن تُقيّم من خلال سلوك المحادثة متعدد الوكلاء في سياقه الطبيعي بدلاً من اختبارات المعايير القياسية، مقدمةً إطار عمل "MAC-Fairness" للكشف عن بصمات سلوكية مستقرة وخاصة بكل نموذج، والتي تحجبها عدم الموثوقية الهيكلية للاختبارات القائمة على الأوامر التقليدية.
تقدم هذه الورقة البحثية إطار عمل IAP، وهو إطار تعلم تعزيزي يعزز الإجابة الشخصية على الأسئلة أحادية الدور من خلال تدريب النماذج اللغوية على استنتاج ودمج القصد الضمني للمستخدم صراحةً في عملية الاستدلال الخاصة بها، مما يؤدي إلى تفوقها على النماذج المرجعية الحالية في معيار LaMP-QA.
تتحدى هذه الورقة الافتراض القائل بأن وظائف النماذج اللغوية الكبيرة تعتمد على آليات داخلية فريدة من نوعها عبر إثبات إمكانية تعايش دوائر متعددة متباينة بنيوويًا ومخلصة للوظيفة، مقدمةً منهجية مدركة للتداخل للكشف عن هذه التفسيرات غير التقليدية، ومقترحةً إطارًا نظريًا قائمًا على التراكب عالي الأبعاد لتفسير هذا التباين الوظيفي المتأصل.
تكشف هذه الورقة أن محاكيات الطلاب الحالية القائمة على النماذج اللغوية الكبيرة تفشل في الحفاظ على مفاهيم خاطئة متماسكة أثناء التفاعلات، حيث تظهر بدلاً من ذلك نزعة "تملقية" لتصحيح الإجابات بشكل عشوائي بغض النظر عن صلة التغذية الراجعة، لكنها تثبت أن إخلاص هذه المفاهيم الخاطئة يمكن تحسينه بشكل كبير من خلال مسار تدريب لاحق متخصص يتضمن الضبط الدقيق الخاضع للإشراف والتعلم التعزيزي.
تقدم هذه الورقة WriteSAE، وهو أول مشفر تلقائي متناثر (sparse autoencoder) مصمم لتفكيك وتحرير عمليات كتابة ذاكرة التخزين المؤقت للمصفوفات (matrix cache writes) في نماذج اللغة ذات فضاء الحالة (state-space) والنماذج المتكررة الهجينة، وذلك عبر تحليل ذرات فك التشفير إلى شكل تحديثها الأصلي من الرتبة 1 (rank-1 update shape)، مما يتيح تدخلات سلوكية دقيقة وتنبؤاً عالي الدقة بالأثر.
تقدم الورقة البحثية REALISTA، وهو إطار عمل هجومي تنافسي مبتكر يقوم بتوليد مطالبات واقعية محفزة للهلوسة من خلال تحسين التوليفات المستمرة لاتجاهات التعديل المتكافئة دلاليًا في الفضاء الكامن، متجاوزًا بذلك قيود الطرق المنفصلة والمستمرة الحالية لاستهداف كل من النماذج مفتوحة المصدر ونماذج الاستدلال الكبيرة بفعالية.
تقدم هذه الورقة "مقياس المعقولية الآلية"، وهو إطار عمل مكون من أربعة مستويات يميز بين الكفاية التوليدية للنموذج ومعقوليته الآلية من خلال دمج محاكاة الوكلاء القائمة على النماذج اللغوية الكبيرة مع فلسفة العلوم لتقييم مدى قدرة هذه النماذج على تفسير الأنشطة المنظمة التي تنتج الظواهر الاجتماعية بشكل أفضل.