12021 ورقة بحثية
تقدم هذه الورقة البحثية طريقة "التقليم التفاضلي الحتمي" (DDP)، وهي منهجية مبتكرة تقضي على عدم التطابق بين التدريب والاختبار والعشوائية في أساليب التقليم الهيكلي السابقة من خلال التحسين المباشر لنموذج بديل ناعم حتمي لهدف l0، مما يحقق تقارباً أسرع، وتعبيراً أكبر، وقدرة فائقة على الاحتفاظ بالأداء (على سبيل المثال، فقدان بنسبة ~1%) في النماذج اللغوية الكبيرة مثل Qwen3 عند مستويات تخلخل عالية.
تقدم الورقة البحثية "رامسا"، وهي مدونة صوتية للغة العربية الإماراتية متنوعة لغويًا واجتماعيًا مدتها 41 ساعة وتضم 157 متحدثًا عبر مختلف اللهجات والمواضيع، والتي تعمل كمورد أساسي لتطوير تقنيات التعرف التلقائي على الكلام (ASR) وتحويل النص إلى كلام (TTS) منخفضة الموارد مع وضع خطوط أساس أداء أولية للنماذج الحالية.
يُعد EvoScientist إطار عمل متعدد الوكلاء متطوراً يستفيد من الذاكرة المستمرة والتطور الذاتي لصقل استراتيجيات البحث باستمرار، مما يجعله يتفوق على الأنظمة الحالية الرائدة في توليد أفكار علمية مبتكرة وتنفيذ تجارب ناجحة للاكتشاف الشامل من البداية إلى النهاية.
تقدم هذه الورقة معيارين جديدين، WinoMTeus وFLORES+Gender، لتقييم التحيز الجنساني في الترجمة الآلية التي تشمل اللغة الباسكية، مما يكشف أن النماذج اللغوية الكبيرة وأنظمة الترجمة الآلية الحالية تظهر تفضيلاً منهجياً للصور المذكرة عند الترجمة بين اللغات غير المحددة جنسياً واللغات المحددة جنسياً.
يُعد RexDrug إطار عمل لنماذج لغوية كبيرة معززة بالاستنتاج، يستخدم استراتيجية تدريب ثنائية المراحل تجمع بين التوليد الاستنتاجي التعاوني متعدد الوكلاء والتعلم التعزيزي لتحقيق أداء رائد في استخراج تركيبات الأدوية المعقدة متعددة العناصر (n-ary) من الأدبيات الطبية الحيوية.
تقدم هذه الورقة البحثية نموذج TildeOpen LLM، وهو نموذج مفتوح الأوزان بـ 30 مليار معلمة يحقق أداءً فائقاً عبر 34 لغة أوروبية، لا سيية للمجموعات ذات الموارد المنخفضة، وذلك من خلال توظيف التعلم المنهجي وزيادة عينات البيانات لمعالجة عدم التوازن في البيانات دون الحاجة إلى زيادة الموارد الحوسبية.
يُعد DualTurn نموذجاً توليدياً للكلام ثنائي القنوات يتعلم ديناميكيات تبادل الأدوار الطبيعية من خلال التدريب المسبق غير الخاضع للإشراف على التسجيلات الصوتية الحوارية والضبط الدقيق للتنبؤ بأفعال الوكيل، متفوقاً بذلك على الأساليب الحالية في كل من دقة التنبؤ بالفعل واستباق حدود تبادل الأدوار مع تمكينه من قدرات استدعاء الأدوات.
تقدم هذه الورقة مصفوفة النقل عبر اللغات (CLTM) للقياس المنهجي لتباينات الأداء المعتمدة على اللغة في المهام شبه اللغوية مثل تحديد الجنس والتحقق من هوية المتحدث، كاشفةً أنه على الرغم من طبيعتها الصوتية، تُظهر هذه المهام أنماط نقل عبر اللغات متميزة عند استخدام مشفرات تعتمد على نموذج HuBERT متعدد اللغات.
تقدم هذه الورقة البحثية "تحسين سياسة الألياف" (FiberPO)، وهو إطار عمل موحد يربط بين نظرية منطقة الثقة والبنى الجبرية التركيبية لتمكين التحكم المبدئي في الاستقرار متعدد المقاييس في تدريب النماذج اللغوية الكبيرة من خلال "هدف رقابة السياسة التجميعي" المبتكر وآلية "بوابة حزمة الألياف".
تتقصى هذه الورقة كيف تؤثر عشوائية التدريب على استقرار تفسيرات نماذج "ترانسفورمر" (Transformer)، حيث تُبين أنه في حين أن السياق النحوي، وفئات الأهداف، وأنواع المهام، جميعها تؤثر بشكل كبير على هذه الحساسية، فإن التأثير يكون في أدنى مستوياته بالنسبة للسياق، ومتوسطاً للفئات، وأكبره للمهام.