24888 ورقة بحثية
تُثبت هذه الورقة أن تدريب نموذج انتباه معدل على مستوى التسمية (label-wise attention model) باستخدام مزيج من بيانات ICD-9 وICD-10 يحسن بشكل كبير من أداء التنبؤ برموز ICD-10، لا سيما بالنسبة للرموز النادرة، وذلك من خلال سد الفجوات بين الإصدارات ومعالجة مشكلة الذيل الطويل (long-tail problem) بعدد أقل من المعلمات.
يُعد OSCAR طريقةً قابلة للنشر لتقنيات تكميم ذاكرة التخزين المؤقت (KV cache) بدقة بتّين (2-bit)، والتي تستفيد من تقدير التباين الطيفي غير المتصل (offline spectral covariance estimation) لاستخلاص تدويرات محاذية للانتباه وعتبات قصّ (clipping thresholds)، مما يُمكّن من تحقيق دقة تقارب عدم الفقد في مهام الاستدلال ذات السياق الطويل، مع تقليل استهلاك الذاكرة بشكل كبير وتحسين إنتاجية الاستدلال في أطر عمل خدمة النماذج اللغوية الكبيرة الحديثة.
تقدم هذه الورقة نظام استرجاع عصبي متناثر، قوي وخالٍ من الاستدلال، للبحث الموسيقي الصناعي، يستفيد من التجزئة الفرعية المعتمدة على الرموز (subword tokenization) ذات النطاق المحدد والتمثيلات المتجهة (embeddings) المحسوبة مسبقاً لتحقيق زمن انتقال يقترب من الصفر، مع التفوق بشكل كبير على مطابقة الثلاثيات (trigram matching) التقليدية في كفاءة الاستدعاء والاستكشاف للتعامل مع الاستعلامات الغامضة.
تقيم هذه الدراسة بشكل منهجي ملاحظات سريرية اصطناعية بمقياس الملايين تمت إعادة صياغتها بواسطة النماذج اللغوية الكبيرة، كاشفةً أنه في حين أن إعادة الصياغة القائمة على التجزئة تحافظ على المعلومات الجوهرية وتساعد في تدريب الرموز النادرة، إلا أنها تنطوي على مخاطر فقدان التفاصيل الدقيقة وإدخال أخطاء واقعية بسبب سوء تفسير السياق والارتباك الزمني.
تقدم هذه الورقة SocialMemBench، وهو معيار شامل يثبت أن أنظمة ذاكرة الذكاء الاصطناعي الحالية تفشل بشكل كبير في بيئات المجموعات الاجتماعية متعددة الأطراف بسبب قيود هيكلية محددة مثل خلط الكيانات والخلط بين المعايير والفرد، مما يسلط الض الضوء على فجوة حرجة بين الأدوات الحالية واحتياجات المساعدين الاجتماعيين في المستقبل.
تقدم هذه الورقة PuppyChatter، وهو إطار عمل برمجِيّ مبتكر يحل المعضلة بين تعقيد حزم تطوير البرمجيات (SDKs) الخاصة بكل مورد وبين محدودية تجريد النماذج، وذلك عبر تقديم نموذج تطوير مبسط ومحايد للموردين لتطبيقات الذكاء الاصطناعي يحافظ على البساطة البديهية لحزم تطوير البرمجيات الأصلية.
تُثبت هذه الورقة أن نموذج "ترانسفورمر" متكرر ذي أوزان مشتركة يمكنه تطوير أدوار وظيفية متميزة تلقائياً — وتحديداً حالة اقتراح ملزمة وحالة وسيطة غير يقينية — عند تزويده بإشارة واضحة للتمييز بين أنواع التحديث، مثل الحقن غير المتماثل للمدخلات أو رمز مستوى منفصل.
تقدم الورقة البحثية CounterCount، وهو إطار تشخيصي يكشف اعتماد نماذج الرؤية واللغة على الأوليات الموضوعية بدلاً من الأدلة البصرية في مهام العدّ المقابلة للواقع، وتقترح استراتيجية تعديل انتباه عند الاستدلال لتحسين دقتها بشكل كبير.
تقدم هذه الورقة البحثية "الاستقلال التفاضلي بين المحتوى والأسلوب" (CSDI)، وهو شرط هيكلي جديد يضمن قابلية تحديد عوامل المحتوى والأسلوب في النماذج التوليدية من خلال فرض التعامد بين تغيراتها اللانهائية، مما يتغلب على قيود افتراضات الاستقلال والتناثر السابقة مع تمكين التدريب القابل للتوسع للمهام عالية الأبعاد مثل التوليد المقابل للواقع.
تقدم هذه الورقة مفهوم "تلوث الذاكرة الزمني" لتوضيح أن وكلاء النماذج اللغوية الكبيرة المزودين بالذاكرة يراكمون المخاطر الأمنية بمرور الوقت عبر مهام مستقلة، مما يستلزم التحول من تقييمات السلامة أحادية الحالة إلى تقييمات طولية.