24194 ورقة بحثية
تقدم الورقة البحثية "ويبليكا" (Weblica)، وهو إطار عمل يستفيد من التخزين المؤقت على مستوى بروتوكول HTTP والتركيب القائم على النماذج اللغوية الكبيرة لإنشاء بيئات ويب قابلة للتوسع وقابلة لإعادة الإنتاج، مما مكن من تدريب نموذج "ويبليكا-8B" الذي يتفوق على النماذج مفتوحة الأوزان الحالية في مهام الملاحة البصرية عبر الويب.
تقدم هذه الورقة Louver، وهو فهرس مبتكر ومُحسَّن للأجهزة يعيد صياغة الانتباه المتناثر (sparse attention) كمسألة بحث عن نطاق نصف الفضاء لضمان عدم وجود سلبيات كاذبة في استرجاع ذاكرة التخزين المؤقت لـ KV، محققاً بذلك دقة وكفاءة زمن تشغيل متفوقتين مقارنة بطرق الانتباه المتناثرة والكثيفة الحالية.
تقترح الورقة البحثية مسافة مونج للإنسبشن (MIND)، وهي مقياس لتقييم النماذج التوليدية يستفيد من مسافة واسرستينين المقطوعة لتحقيق كفاءة عينة، وسرعة حوسبة، ومتانة ضد الهجمات العدائية متفوقة مقارنة بمسافة إنسبشن فريشيه (FID) القياسية.
تُعد LookWhen إطار عمل فعال لتمييز الفيديو يستخدم مُنتقيًا ضحلاً لتحديد ومعالجة الرموز الأكثر إفادة فقط، مما يحقق مقايضات فائقة بين الدقة والحوسبة مقارنة بالنماذج الحالية من خلال تعلم متى وأين وماذا تحسب.
تقدم هذه الورقة تقنية "التقطير من النموذج إلى البيانات" (M2D)، وهي إطار عمل يعزز شفافية الشبكات العصبية الرسومية عبر نقل تعقيد النموذج إلى فضاء البيانات، مما يسمح للنماذج الطلابية البسيطة بمضاهاة أداء النموذج المعلم مع جعل المزايا الهيكلية والآليات الكامنة قابلة للفحص المباشر.
تقدم هذه الورقة إطاراً موحداً قائماً على نظرية القياس يكشف أن نماذج الانتشار، والنماذج التوليدية القائمة على الدرجة (score-based)، ومطابقة التدفق (flow matching) هي حالات لتعلم حقول متجهة تعتمد على الزمن لنقل توزيع مرجعي إلى توزيع بيانات، مما يوضح بنيتها الرياضية المشتركة، والمقايضات العملية، والروابط النظرية بينها.
تقدم الورقة البحثية ProtSent، وهو إطار عمل للضبط الدقيق التبايني يعمل على تكييف نماذج لغة البروتين لتصبح نماذج تضمين عامة الأغراض، مما يحسن الأداء بشكل كبير عبر 23 مهمة لاحقة تتعلق بوظيفة البروتين وبنيته وتطوره دون الحاجة إلى إشراف خاص بكل مهمة.
تُثبت هذه الورقة نظرياً أن الطبيعة الحتمية لنموذج DDIM تجعله يقع في فخ بين الأنماط (modes) ويقوم بالهلوسة في أهداف الخليط الغاوسي (Gaussian mixture)، في حين أن العشوائية في نموذج DDPM تمكنه من الهروب من هذه المناطق، وهو اكتشاف يشير إلى أن دمج الخطوات العشوائية يمكن أن يحسن جودة أخذ العينات في DDIM.
تقدم هذه الورقة "تقطير قناع الظل" (Shadow Mask Distillation)، وهو أسلوب مبتكر صُمم للتخفيف من حدة الانحياز الشديد خارج السياسة (off-policy bias) وتباين التدرج الناتج عن تطبيق ضغط ذاكرة التخزين المؤقت لـ (KV cache) أثناء مرحلة التدحرج (rollout phase) في التعلم التعزيزي ما بعد التدريب، مما يتيح محاذاة فعالة من حيث استهلاك الذاكرة لمهام الاستدلال ذات السياق الطويل.
تجادل هذه الورقة بأن الفجوة بين الأداء القوي للذكاء الاصطناائي التوليدي في الاختبارات المعيارية وفائدته المحدودة في العالم الحقيقي تنبع من ممارسات تقييم معيبة، وتقترح إطار عمل SCU-GenEval لتحويل التقييم نحو قياس التحسينات المستدامة في النتائج البشرية ضمن سياقات نشر محددة.