23941 ورقة بحثية
تقترح الورقة البحثية Gap-K%، وهي طريقة مبتكرة للكشف عن بيانات ما قبل التدريب في النماذج اللغوية الكبيرة، والتي تستفيد من فجوة الاحتمال اللوغاريتمي بين التنبؤ الأول (top-1) والرمز المستهدف، بالاقتران مع استراتيجية النافذة المنزلقة، لتحقيق أداء رائد على مجموعات البيانات المرجعية.
تقدم هذه الورقة إطاراً تشخيصياً ذا مرحلتين يرتكز على نموذج الاستجابة المتدرجة ضمن نظرية الاستجابة للمفردة، وذلك لتقييم موثوقية استخدام النماذج اللغوية الكبيرة كحَكَم بشكل منهجي، عبر تقييم اتساقها الجوهري تحت متغيرات الأوامر البرمجية ومدى توافقها مع تقييمات الجودة البشرية.
تقدم هذه الورقة البحثية OddSHAP، وهو مُقدِّر جديد لقيمة شابلي (Shapley value) يحقق دقة هي الأفضل في فئته من خلال الإثبات النظري بأن أخذ العينات المزدوج يستبعد المكونات الزوجية غير ذات الصلة من دالة المجموعة، مما يتيح إجراء انحدار متعدد الحدود بكفاءة على الفضاء الجزئي الفردي فقط.
تقدم الورقة البحثية PENCIL، وهو نموذج Transformer بسيط يعتمد فقط على المشفر (encoder-only)، يتميز بالقابلية للتوسع وكفاءة المعلمات، حيث يستفيد من آلية الانتباه عبر الرسوم البيانية الفرعية المحلية التي يتم أخذ عينات منها ليتفوق على الشبكات العصبية الرسومية المعقدة والنهج القائمة على الاستدلال في التنبؤ بالروابط دون الاعتماد على ميزات العقد أو الأولويات الهيكلية المصممة يدويًا.
تقترح الورقة البحثية إطار عمل "خليط من خبراء عنق الزجاجة للمفاهيم" (M-CBE)، وهو إطار يعزز نماذج عنق الزجاجة للمفاهيم عبر توظيف خبراء متعددين ذوي أشكال وظيفية متنوعة لتحسين دقة التنبؤ والقدرة على التكيف مع الحفاظ على القابلية للتفسير.
تقدم هذه الورقة COVER، وهي طريقة تحقق حافظة للسياق تقضي على تذبذبات الـ flip-flop في فك التشفير الانتشاري سريع الإلغاء من خلال استخدام تجاوزات ذاكرة التخزين المؤقت لـ KV وآلية تسجيل تعتمد على الاستقرار لتمكين توليد الرموز المتوازي عالي الجودة والكفء.
تقترح هذه الورقة إطار عمل يجمع بين الاختبار السلوكي وتحليل القابلية للتفسير لتقييم التوجه نحو الأهداف في وكلاء النماذج اللغوية، مبرهنةً من خلال دراسة حالة في عالم الشبكة (grid-world) أنه بينما يُظهر الوكلاء أداءً قويًا، فإن تمثيلاتهم الداخلية للخرائط المكانية وخطط العمل تخضع لإعادة تنظيم غير خطية أثناء عملية الاستنتاج، مما يسلط الضوء على ضرورة الفحص الاستبطاني لما يتجاوز مجرد الملاحظة السلوكية.
تقدم هذه الورقة "الدوائر المعتمدة" (Certified Circuits)، وهو إطار عمل يعزز استقرار وموثوقية التفسير الآلي من خلال استخدام أخذ عينات فرعية عشوائية للبيانات لتوفير ضمانات مثبتة بأن الدوائر العصبية المكتشفة ثابتة تجاه اضطرابات مجموعة البيانات، مما يؤدي إلى تفسيرات أكثر إيجازاً ودقة عبر مختلف البنى والمهام.
تقدم هذه الورقة البحثية EGGROLL، وهو تحليل ذو رتبة منخفضة لاستراتيجيات التطور يتيح تدريبًا فعالًا وخاليًا من التدرج للشبكات العصبية النبضية على الأجهزة العصبية من خلال تقليل التكاليف الحسابية وتكاليف الذاكرة بشكل كبير مع تحقيق دقة تنافسية على مجموعة بيانات N-MNIST.
تقدم هذه الورقة البحثية XOResNet، وهي بنية شبكة عصبية نبضية عميقة تستخدم اتصال اختصار من نوع OR-ADD وبقايا ميتا-إكس-أور (Exclusive-OR meta-residuals) للتغلب على تكرار النبضات وفقدان المعلومات، مما يحقق أداءً فائقاً على النماذج الحالية الرائدة في عدة مجموعات بيانات مرجعية.