💬 NLP

TEXAS: Task-Expert-Aware Supervision for Downstream Mixture-of-Experts LLM Adaptation

تقدم الورقة البحثية TEXAS، وهي طريقة تكييف مبتكرة لنماذج لغة "خليط الخبراء" (Mixture-of-Experts) تعمل على تحديد الخبراء ذوي الصلة بالمهمة من خلال مقارنة تنشيطاتهم في الحالات الناجحة مقابل الحالات الفاشلة، وتستفيد من هذا الاكتشاف لزيادة وزن الإشراف ديناميكيًا على رموز الإجابة أثناء الضبط الدقيق، مما يحقق أداءً رائدًا عبر معايير متعددة دون تقييد مجموعات الخبراء الفرعية.

Guanzhi Deng, Haibo Wang, Kuan Wu, Xiangru Jian, Shing Yin Wong, Sichun Luo, Zhuoran Wang, Linqi Song2026-08-10
🤖 AI

EntropyMoE: Entropy-Aware Sparse Expert Routing for Tokenizer-Free LLMs

يقدم EntropyMoE بنية "خليط من الخبراء" (Mixture-of-Experts) واعية بالإنتروبيا للنماذج اللغوية الكبيرة الخالية من أجهزة الترميز (tokenizer-free)، والتي تقوم بتوجيه الرقع (patches) على مستوى البايت ديناميكيًا إلى خبراء متخصصين بناءً على الإنتروبيا والطول الخاص بها، محققةً كفاءة ضغط فائقة ودقة مماثلة دون الاعتماد على أجهزة ترميز ثابتة.

Bo Liu, Muxuab Yu, Yu Zhang, Pengfei Gao, Yongping Zhang2026-08-10
🤖 AI

Beyond Routing Weights: Faithful Response-Level Interpretation of Mixture-of-Experts Reward Models via Contribution Contrast

تقدم هذه الورقة البحثية "تباين المساهمة" (CoCo)، وهي طريقة تفسير جديدة على مستوى الاستجابة لنماذج المكافأة القائمة على خليط الخبراء (Mixture-of-Experts)، تتغلب على قيود التحليل القائم على أوزان التوجيه من خلال تحديد أدوار الخبراء عبر أزواج الاستجابات (المختارة-المرفوضة) ذات أكبر تباينات المساهمة، مما يقدم تفسيرات أكثر دقة وتخصصاً مع الحفاظ على دقة تنافسية.

Yifan Wang, Jinyi Mu, Mayank Jobanputra, Yu Wang, Soyoung Oh, Isabel Valera, Vera Demberg2026-08-10
💬 NLP

Separating Decision-Rule Misalignment from Readout-Coverage Limitations in Speech Language Models

تقدم هذه الورقة سلماً تشخيصياً متوافقاً مع عملية التوليد لفك الارتباط بين قيود الأداء في نماذج اللغة الكلامية إلى فجوات متميزة ناتجة عن عدم توافق قواعد القرار وقيود تغطية القراءة، مما يكشف أنه بينما تتوفر المعلومات العاطفية غالباً في الحالات الخفية، فإن النماذج تفشل في كثير من الأحيان في استخدامها بفعالية بسبب آليات فك التشفير والقراءة غير المثالية.

Linkai Peng, Baorian Nuchged2026-08-10
🤖 AI

Learning to Predict Middle-Layer Attention in MLLMs for Visual Token Prunin

تقترح هذه الورقة البحثية "تنبؤ انتباه الطبقة المتوسطة" (MAP)، وهي طريقة تحدد ديناميكيًا طبقات الانتباه المثلى الخاصة بكل عينة وتعمل على تقطيرها في متنبئ خفيف الوزن لتقليص الرموز البصرية قبل معالجتها بواسطة النموذج اللغوي، مما يحقق تسريعًا في الأداء بنسبة 3.09 ضعفًا من البداية إلى النهاية مع الحفاظ على 97.5% من الأداء على نموذج LLaVA-NeXT-7B.

Yuyao Sun, Tao Deng, Shuang Li, Deqing Wang, Hao Geng, Minjun Yu2026-08-10
🤖 AI

ED-CSP: Crystal Structure Prediction from Electron Diffraction

تقدم هذه الورقة ED-CSP، وهو إطار عمل للتعلم الآلي يستفيد من مشفر مجموعة علائقية ومولد تدفق دوري للتنبؤ ببنى البلورات ثلاثية الأبعاد من أنماط حيود إلكتروني متفرقة وغير مفهرسة والتركيب الكيميائي، محققاً أداءً هو الأفضل في فئته على مجموعة بيانات تم إنشاؤها حديثاً تضم 4.85 مليون بنية محاكاة.

Germain Poloudenny, Yaël Frégier, Arnaud Demortière2026-08-10
🤖 AI

CyberForge: Verified Vulnerability Injection at Repository Level for Cybersecurity Agent Training

إن CyberForge هو إطار عمل يعمل على توليف والتحقق ديناميكياً من بيانات تدريب أمنية قابلة للتنفيذ وعلى مستوى المستودعات عبر حقن ثغرات في مشاريع حقيقية بلغة C/C++، مما يحسن بشكل كبير من قدرات اكتشاف الثغرات ومعالجتها لدى الوكلاء السيبرانيين عبر مختلف أحجام النماذح ولغات البرمجة.

Amine Lbath, Manan Suri, Aurelien Delaitre, Vadim Okun, Massih-Reza Amini, Ram D. Sriram, Dinesh Manocha2026-08-10
🤖 AI

CertBind from Multimodal Connectivity to Certifiable Retrieval Decisions

تقدم هذه الورقة CertBind، وهو إطار نظري متعدد المقاييس يضمن قرارات استرجاع قابلة للتحقق في الرسوم البيانية للموصلات متعددة الوسائط المجمدة من خلال تحديد حدود المهام، والتحكم في معدلات الخطأ، وتوفير آلية تراجع لاستعادة الأداء مع الحفاظ على ضمانات السلامة.

Shuheng Cao, Zhenhao Zhang, Ruiqi Chen, Renjie Cao, Weijia Zhang, Siyu Zhang, Jiaxin Liu, Xiangyu Zeng, Haotian Geng, Fa (…)2026-08-10
🤖 AI

KNOWPLAN: Knowledge-Driven AI Agents for Smart Degree Pathway Planning

إن KnowPlan هو نظام ذكاء اصطناعي قائم على المعرفة يتكون من مرحلتين، حيث يقوم أولاً بإعادة بناء المناهج الجامعية من مصادر غير متجانسة باستخدام زاحف استباقي يعتمد على مبدأ الاستخراج أولاً (CatalogBrowse)، ثم يعمل بعد ذلك على تحسين مسارات الدرجات العلمية الشخصية عبر حلّال فائق الرسم البياني معتمد (DegreeMap)، محققاً بذلك استدعاءً عالياً وقابلية تنفيذ مرتفعة مع تقليل تكاليف الوصول إلى المصادر بشكل كبير مقارنة بالنهج الشامل.

Shuheng Cao, Weijia Zhang, Jiaqi Wu, Xiyun Hu, Yat Yang, Juqy Chen, Zhaoxiang Feng2026-08-10
🤖 AI

TaskSense: Focusing on What Matters in World Models

تُعد TaskSense إطار عمل لنمذجة العالم متمحوراً حول المهام، يعمل على تحسين المتانة تجاه المشتتات البصرية باستخدام آلية انتباه عشوائية قابلة للتفاضل وهدف ديناميكيات عكسية مساعد للتركيز على التمثيلات الكامنة في المناطق ذات الصلة بالتحكم بدلاً من إعادة بناء الملاحظات الكاملة.

SM Mazharul Islam, Manfred Huber2026-08-10