12427 ورقة بحثية
تكشف هذه الورقة أن نماذج "ترانسفورمر" المدربة على المهام الخوارزمية تمر بمرحلة "تعلم الميزات الصامت"، حيث يتم اكتساب الحسابات الوسيطة الحرجة خلال فترات ركود الخسارة، مما يتحدى موثوقية "الاعتلاج المتقاطع" كمؤشر وحيد لتقدم التعلم.
تُظهر هذه الدراسة أن "هوب بوت" (HopeBot)، وهو روبوت محادثة مدعوم بنماذج اللغات الكبيرة ومصمم لإجراء استبيان PHQ-9 بشكل تفاعلي، يحقق توافقاً قوياً في النتائج مع الطرق التقليدية، بينما يكسب ثقة المستخدم وراحته واستعداده لإعادة الاستخدام بمستويات عالية، مما يؤكد إمكاناته كأداة مساعدة قابلة للتوسع لفحص الاكتئاب.
تقدم الورقة البحثية LingVarBench، وهو معيار وخط إنتاج لتوليد البيانات الاصطناعية يستفيد من الأنماط المتنوعة لغويًا والقيم التي يتم أخذ عينات منها بواسطة النماذج اللغوية الكبيرة (LLM) لتحسين مطالبات الاستخراج تلقائيًا، محققًا أداءً يضاهي النماذج التي تم ضبطها بشريًا في التعرف على الكيانات المهيكلة في نصوص المكالمات الهاتفية، مع التغلب على تحديات خصوصية البيانات وتكاليف التوسيم.
تقدم هذه الورقة إطار عمل فعال للتدريب المسبق لنماذج اللغات الصغيرة (SLMs) يجمع بين البحث التطوري لتحديد تهيئات الشبكات الفرعية المتناثرة هيكلياً وبين تقطير المعرفة من النماذج الأكبر، محققاً أداءً مقارباً للمعايير المرجعية القياسية مع تقليل التكاليف الحسابية بشكل كبير.
تقدم الورقة البحثية SOP-Maze، وهو معيار مرجعي جديد مستمد من بيانات أعمال واقعية، والذي يقيم النماذج اللغوية الكبيرة في إجراءات التشغيل القياسية المعقدة عبر تصنيف المهام إلى تحديات استدلال جانبي وعميق، مما يكشف عن معاناة كبيرة في حالات "العمى المساري"، و"الهشاشة الحوارية"، و"أخطاء الحساب" عبر النماذج المتطورة.
تتقصى هذه الورقة كيف تتباين أحكام نماذج اللغات الكبيرة في الفهم الزمني وأحكام التشابه بين أطر المرجعية الإشارية (ماضٍ-حاضر-مستقبل) والأطر التتابعية (قبل-بعد)، مما يكشف عن أنماط بنيوية متميزة تتأثر بالمسافة الزمنية، وعلاقات الفترات، ومدة الحدث.
تقدم هذه الورقة طريقة استقصاء قائمة على معالجة الإشارات لتحديد وتصنيف رؤوس الانتباه المتخصصة في نماذج المحولات متعددة الوسائط، مما يثبت أن تعديل ما لا يزيد عن 1% من هذه الرؤوس يمكن أن يتحكم بفعالية في مفاهيم دلالية أو بصرية محددة في مخرجات النموذج.
تقدم هذه الورقة مجموعتي بيانات BEA-Large وBEA-Dialogue، اللتين تشتملان على كلام مجري عفوي وحواري، لمعالجة ندرة مثل هذه الموارد وإرساء خطوط أساس قابلة للتكرار للتعرف التلقائي على الكلام وتجزئة المتحدثين تسلط الضوء على تحديات التعرف على الكلام الحواري.
تقدم هذه الورقة البحثية "Afri-MCQA"، وهو أول معيار تقييم متعدد الوسائط يتكون من 7.5 ألف زوج من الأسئلة والأجوبة ذات الجذور الثقافية عبر 15 لغة أفريقية تم إنشاؤها بواسطة متحدثين أصليين، مما يكشف عن فجوات كبيرة في أداء النماذج اللغوية الكبيرة الحالية فيما يتعلق بقدرات اللغة الأصلية والقدرات الصوتية، مع الدعوة إلى تطوير ذكاء اصطناعي أكثر شمولاً ووعياً بالثقافة.
تقدم الورقة البحثية "تطور السياق الوكيل" (ACE)، وهو إطار عمل مستوحى من الميتا-معرفة (ما وراء المعرفة) يعمل استراتيجياً على التناوب بين الاسترجاع والاستدلال عبر وكيل منسق للقضاء على الخطوات الزائدة، مما يؤدي إلى تحسين الدقة والكفاءة في المهام كثيفة المعرفة مقارنة بطرق التوليد المعزز بالاسترجاع الجامدة.