12021 ورقة بحثية
تقدم هذه الورقة البحثية DCTR، وهي آلية لاسترجاع الجداول تستفيد من تفكيك الاستعلام المعتمد على الأنواع دقيق التفاصيل والوعي بالاتصال العالمي للتعامل بفعالية مع الإجابة على الأسئلة المعقدة في النطاق المفتوح عبر قواعد البيانات العلاقاتية، مما يظهر متانة على المعايسات المرجعية المتوافقة مع الصناعة.
تُظهر هذه الورقة أن توسيع نطاق نماذج الكلام ذاتية الإشراف من 1,000 إلى 4,000 لغة يؤدي إلى تحول غير خطي يُمكّن من اكتشاف العلاقات النسبية العميقة وأنماط الاتصال المعقدة، وهو ما يتجلى في ظهور عنقود كلي متين لمنطقة المحيط الهادئ مدفوعاً بالسمات الصوتية المشتركة.
تقدم هذه الورقة TS-Bench، وهو معيار قياسي لتقييم السلامة في لغة الماندرين التايوانية، وBreeze Guard، وهو نموذج سلامة بحجم 8 مليارات معلمة تم ضبطه بدقة باستخدام بيانات قائمة على أسس ثقافية، والذي يتفوق بشكل كبير على نماذج السلامة العامة في المخاطر المرتبطة بمنطقة محددة، بينما يثبت أن الكشف الفعال عن السلامة يتطلب وجود أساس ثقافي مسبق في النموذج الأساسي.
تقدم هذه الورقة RILEC، وهي مجموعة بيانات واسعة النطاق وإطار عمل توليدي للكشف عن أخطاء التداخل من اللغة الروسية (L1) وإنشائها في نصوص متعلمي اللغة الإنجليزية، مما يثبت أن النماذج التي تم ضبطها بدقة باستخدام هذه البيانات المعززة تحسن بشكل كبير من تحديد أنواع أخطاء محددة مثل الترجمة الحرفية وسوء استخدام الزمن.
تقدم هذه الورقة البحثية OAKS، وهو معيار مصمم لتقييم قدرة النماذج اللغوية الكبيرة على التكيف مع تدفقات المعرفة المتطورة باستمرار، كاشفةً أن النماذج الحالية المتطورة وأنظمة الذاكرة الوكيلية تعاني من صعوبة في تتبع الحالة بدقة وهي عرضة بشدة للتشتت في البيئات الديناميكية.
تُثبت هذه الورقة أن نماذج الرؤية واللغة يمكنها استعادة وتعميم المعرفة التصنيفية (الأسماء العليا) من التمثيلات اللغوية حتى عند حرمانها من الأدلة البصرية الصريحة أثناء التدريب، شريطة أن تحافظ خرائط الربط بين الصور والملصقات الافتراضية على تماسك بصري عالٍ ضمن الفئات.
تكشف هذه الورقة أن نماذج اللغة الانتشارية تطور تمثيلات داخلية هرمية متميزة مع وجود تكرار في الطبقات المبكرة مقارنة بالنماذج ذات التوليد الذاتي، مما يتيح طريقة استدلال مبتكرة لتخطي الطبقات دون الحاجة للتدريب تقلل التكاليف الحسابية بشكل كبير مع الحفاظ على أداء عالٍ.
تقترح هذه الورقة نظاماً عصبياً مشتركاً جديداً من طرف إلى طرف يعمل على تحسين التعرف على المفاهيم، وتصنيف التأكيد، واستخراج العلاقات للنصوص السريرية في آن واحد، متفوقاً بشكل كبير على النماذج التقليدية المتسلسلة في جميع المهام الثلاث.
تقدم هذه الورقة Bolbosh، وهو أول نظام عصبي مفتوح المصدر لتحويل النص إلى كلام للغة الكشميرية، والذي يستخدم استراتيجية تكييف عبر لغوية خاضعة للإشراف ومعتمدة على النص، بناءً على مطابقة التدفق الشرطي للنقل الأمثل ومسار تعزيز صوتي ثلاثي المراحل للتغلب على قيود النماذج المرجعية متعددة اللغات ذات القدرة على التوليد من محاولة واحدة (zero-shot)، وتحقيق جودة كلام ووضوح أعلى بشكل ملحوظ.
تقدم هذه الورقة Megatron Core، وهو إطار عمل مفتوح المصدر وقابل للتوسع وجاهز للإنتاج، يعالج تحديات الذاكرة والاتصال والحوسبة المترابطة لتدريب نماذج خليط الخبراء (MoE) من خلال تحسينات متكاملة على مستوى النظام، مما يتيح تدريباً عالي الأداء لنماذج تتراوح أحجامها من المليارات إلى التريليونات من المعلمات على مجموعات ضخمة من وحدات معالجة الرسومات (GPU).