28108 ورقة بحثية
تؤسس هذه الورقة البحثية للبنية الفئوية باعتبارها الأساس النظري الرسمي لهندسة تسخير وكلاء النماذج اللغوية الكبيرة عبر رسم خرائط للأعمدة الأربعة لتجسيد الوكيل على الثلاثية (G, Know, Phi) الخاصة بإطار عمل ArchAgents، مما يتيح ضمانات هيكلية وتجميعاً عبر الأطر يتم التحقق منه من خلال الهوية وإعادة التشغيل بدلاً من صحة طبقة المخرجات.
تقترح هذه الورقة البحثية مسار معالجة لتصحيح الكلام متعدد اللغات يجمع بين كشف التلعثم على مستوى الرمز (token-level) والضبط الدقيق القائم على التعليمات وهدف التعلم التبايني لإزالة الحشوات والتكرارات من نصوص التعرف الآلي على الكلام (ASR) بفعالية مع الحفاظ على البنية النحوية والتماسك الدلالي، مما أظهر أداءً متفوقاً على النماذج المرجعية الحالية في لغات الهندية والبنغالية والماراثية.
تُصوّر هذه الورقة ظاهرة الاستنتاجات المتباينة من ملاحظات متطابقة بوصفها قضية بنيوية تتعلق بعدم قابلية تحديد النموذج العالمي (world-model non-identifiability) الناجمة عن اختلاف ملفات الاستدلال وانحيازات التعلم، بدلاً من كونها عيباً في العقلانية أو حسن النية.
تقدم هذه الورقة نماذج عمليات ماركوف لاتخاذ القرار ذات البيانات المفقودة (missingness-MDPs)، وهي فئة فرعية جديدة من عمليات ماركوف لاتخاذ القرار بملكية جزئية (POMDPs) التي تُنمذج عدم قابلية ملاحظة سمات الحالة من خلال نظرية البيانات المفقودة، وتقترح خوارزميات التعلم الاحتمالي بأداء قريب من الأمثل (PAC) لتعلم دالة الفقدان الكامنة من بيانات المسار لاستخلاص سياسات مثالية بمقدار إبسيلون (-optimal).
تُثبت هذه الورقة أن الضبط الدقيق للنماذج اللغوية على مهام تصنيف متعددة عبر مجالات مختلفة يحسن الأداء في المجالات غير المرئية، رغم أنها قد تعاني من تغيرات الأوامر، وهو قصور يمكن التخفيف من حدته عن طريق خلط تدريب التصنيف مع اتباع التعليمات العامة لتمكين نماذج قوية لا تتطلب تفكيراً وتعمم على مهام الاستدلال المعقدة.
تقدم هذه الورقة دراسة حالة لعملية تدقيق تكرارية مدفوعة بالوكلاء طُبقت على نظام AEGIS متعدد الوكلاء، والتي استخدمت تسع جولات متتالية من عمليات التفتيش القائمة على النماذج اللغوية الكبيرة لتحديد 51 عيباً في مواصفات الأوامر البرمجية، ووضع تصنيف جديد للعيوب، وإثبات التقارب غير الرتيب في بيئة إنتاج.
تقدم هذه الورقة البحثية "تحسين تفضيل بريغمان على مستوى الرمز" (TBPO)، وهي طريقة مبتكرة تشتق نموذج تفضيل "برادلي-تيري" على مستوى الرمز من مقارنات معيارية على مستوى التسلسل لتحسين جودة المحاذاة، واستقرار التدريب، وتنوع المخرجات، مع الحفاظ على بساطة "التحسين المباشر للتفضيلات" (DPO).
يُعد PriorZero إطار عمل موحداً يسد الفجوة بين المعارف المسبقة الساكنة للنماذج اللغوية الكبيرة والنماذج العالمية الديناميكية من خلال حقن توجيه النموذج اللغوي الكبير حصرياً عند جذر بحث مونت كارلو في الأشجار من أجل استكشاف مركز، وفصل تدريب النموذج العالمي عن تكيف النموذج اللغوي الكبير لتمكين تخصيص ائتمان مستقر ودقيق، مما يعزز بشكل كبير كفاءة وأداء اتخاذ القرار في المهام طويلة الأمد.
تقدم هذه الورقة "الذاكرة الوكيلية القابلة للتنفيذ" (EAM)، وهي إطار عمل قائم على رسم بياني معرفي مهيكل يستبدل تفاعلات النماذج اللغوية الكبيرة الهشة والمتدرجة بعملية استرجاع وتنفيذ قوية باستخدام البحث في الرسم البياني الموجه بالقيم، مما يحقق أداءً فائقاً وتكاليف أقل وزمن استجابة منخفض في مهام أتمتة واجهة المستخدم الرسومية طويلة الأمد.
تقترح الورقة البحثية إطار عمل LISA، وهو إطار تحكيم معرفي خالٍ من الإشارات يستفيد من النماذج اللغوية الكبيرة للاستنتاج حول نوايا المركبات وأولوياتها لإدارة التقاطعات ذاتية القيادة، مما يظهر تحسينات كبيرة في تأخير حركة المرور، وطول الطابور، واستهلاك الوقود، وتحقيق النوايا مقارنة بالطرق التقليدية القائمة على الإشارات أو القائمة على الحجز.