12380 ورقة بحثية
تُثبت هذه الورقة نظرياً وتجريبياً أنه في خوارزمية GRPO، يُعد زيادة عدد الإجابات التي يتم أخذ عينات منها لكل فكرة (التفرع) آلية ضرورية للقضاء على التباين في تقدير الميزة على مستوى الفكرة، بينما لا يمكن لمجرد زيادة عدد الأفكما التي يتم أخذ عينات منها أن يحقق ذلك، مما يثبت أن التفرع أمر أساسي لتحسين الاستدلال بشكل مستقر وفعال.
تقدم هذه الورقة البحثية "سلسلة الهجوم المعززة بالأنماط" (PE-CoA)، وهو إطار عمل يستخدم خمسة أنماط محادثة متميزة لاستغلال الثغرات الهيكلية في النماذج اللغوية الكبيرة بشكل منهجي، مما يكشف أن الدفاعات الأمنية خاصة بكل نمط ولا تتعمم عبر فئات الضرر المختلفة.
تقدم هذه الورقة إطار عمل لنماذج لغوية كبيرة مضبوطة بدقة تعمل بفعالية على أتمتة هجرة الأنظمة القائمة على لغة SQL من Oracle PL/SQL إلى PostgreSQL عبر دمج تقنيات الهندسة التقليدية، وتحليل الأخطاء التكراري، وملاحظات الخبراء لتقليل الأخطاء النحوية بشكل كبير وتحسين منطق قواعد البيانات.
تقدم هذه الورقة البحثية "البحث عن ترتيب الرموز" (Order-Token Search)، وهي طريقة فك تشفير مبتكرة لنماذج اللغة الانتشارية تستكشف بشكل مشترك ترتيب التوليد وفضاء الرموز لتتفوق على النماذج المرجعية الحالية في معايير الاستدلال الرياضي والبرمجة.
توضح هذه الورقة الآليات الداخلية للنماذج اللغوية الكبيرة من طراز R1 عبر تتبع مسار معرفي وراءي سببي مكون من ثلاث مراحل — من مراقبة الميزانية الكامنة إلى تنظيم الإشارات على مستوى الخطاب وصولاً إلى التأمل الذاتي الصريح — باستخدام تحليل عدسة اللوجيت (logit lens) والتدخلات المستهدفة للكشف عن كيفية دفع دلالات المطالبة لسلوك التأمل.
تتناول هذه الورقة تكاليف التدريب المرتفعة لنماذج مكافأة العمليات متعددة الوسائط من خلال تقديم إطار نظري وطريقة "درجة المعلومات المتوازنة" (BIS)، التي تستفيد من إشارات التدفق الحالية لاختيار مجموعات فرعية من البيانات عالية المعلومات تحقق أداء كامل البيانات باستخدام 10% فقط من مجموعة بيانات التدريب.
تقدم هذه الورقة البحثية "تدفق المعلومات الذري" (AIF)، وهو نموذج تدفق شبكي قائم على الرسوم البيانية يعمل على تفكيك مخرجات أنظمة التوليد المعزز بالاسترجاع (RAG) إلى وحدات معلومات غير قابلة للتجزئة لتمكين الإسناد الدقيق للأدوات، والذي يُستخدم بعد ذلك لتدريب نموذج لغوي خفيف الوزن بحجم 4 مليارات معلمة لتحقيق دقة بنسبة 82.71% في تحديد المعلومات الحرجة وضغط سياق بنسبة 87.52%، مما يسد بفعالية فجوة الأداء مع نموذج أكبر بكثير بحجم 27 مليار معلمة.
تقدم الورقة البحثية AutoPrunedRetriever، وهو نظام استرجاع مدعوم بالتوليد (RAG) قائم على الرسوم البيانية يقوم بتخزين وتحديث رسم بياني فرعي للاستدلال الأدنى بشكل تراكمي باستخدام دفتر رموز مدمج وسياسات تقليم، محققاً دقة هي الأفضل في فئتها على معايير الاستدلال المعقدة مع تقليل استهلاك الرموز (tokens) بشكل كبير مقارنة بالنهج التقليدية.
تُثبت هذه الورقة أن النماذج اللغوية متعددة اللغات تُظهر أداءً أدنى من نظيراتها أحادية اللغة في عملية إزالة اللبس المعجمي بسبب قيود سعة محددة — وهي تضاؤل تماثل التضمين، وانخفاض الانتباه إلى الإشارات الموضحة للبس، وزيادة تجزئة الرموز المتعددة — والتي تفسر مجتمعةً "العقوبة متعددة اللغات" الملحوظة.
تقترح الورقة البحثية إطار عمل VEXA، الذي يولد تفسيرات موثوقة لعمليات الاحتيال موجهة للمتعلمين من خلال دمج تأصيل الأدلة القائم على GradientSHAP مع التكيف مع الشخصيات المستند إلى النظرية لضمان الموثوقية الدلالية والقابلية للتفسير الأسلوبي دون المساس بالأمانة.