cs.LG ورقة بحثية

Concept Unlearning via Cross-Attention Activation Projection for Diffusion Models

تقترح الورقة البحثية طريقة PURE، وهي طريقة صياغة مغلقة لنسيان المفاهيم تعمل على إسقاط أوزان مفاتيح وقيم الانتباه المتقاطع بناءً على تمثيلات فضاء التنشيط لمحو المفاهيم المستهدفة بفعالية من نماذج الانتشار تحت المطالبات المعاد صياغتها والمطالبات العدائية مع الحفاظ على توليد المفاهيم المُحتفظ بها.

Saemi Moon, Suhyeon Jun, Seoyeon Lee, Dongwoo Kim2026-05-26

📊 statistics

Efficient Benchmarking Is Just Feature Selection and Multiple Regression

تُثبت هذه الورقة أن تقييم النماذج اللغوية الكبيرة (LLM) بكفاءة يمكن تحسينه بشكل كبير من خلال إعادة صياغة المشكلة كنموذج انحدار متعدد باستخدام انحدار الحافة الجيرية (kernel ridge regression) للتنبؤ وخوارزمية الحد الأدنى من الارتباط مع الحد الأقصى من التباين (mRMR) لاختيار المجموعات الفرعية المثلى من الأسئلة، مما يؤدي إلى أخطاء تنبؤ أقل، وارتباطات ترتيب أعلى، وأداء أسرع وأكثر استقرارًا مقارنة بالطرق الحالية.

Sam Bowyer, Acyr Locatelli, Kris Cao2026-05-26

🤖 machine learning

NPSolver: Neural Poisson Solver with Iterative Physics Supervision

تقدم الورقة البحثية NPSolver، وهو حلّال بواسون عصبي يحقق تدريباً مستقراً وفعالاً على النطاقات المعقدة وغير المنتظمة دون الحاجة إلى بيانات مصنفة، وذلك عبر الاستفادة من الإشراف الفيزيائي التكراري من خلال خطوات مترافق التدرج المسبق وتصميم بنية Transolver الواعية بالحدود.

Bocheng Zeng, Rui Zhang, Runze Mao, Mengtao Yan, Xuan Bai, Yang Liu, Zhi X. Chen, Hao Sun2026-05-26

📊 statistics

On the Benefits of Free Exploration for Regret Minimization in Multi-Armed Bandits

تقدم هذه الورقة إطاراً جديداً لمسألة "المتعدد الأذرع العشوائية" (stochastic multi-armed bandit) حيث يستخدم الوكيل ميزانية استكشاف حر لوغاريتمية قبل تراكم الندم، وتقترح خوارزمية UFE-KLUCB-H وتضع حدوداً وثيقة تعتمد على الحالة تثبت تقليلاً كبيراً في الندم مقارنة بالطرق التقليدية.

Yunlong Hou, Zixin Zhong, Vincent Y. F. Tan2026-05-26

🤖 machine learning

On Reliability of Efficient Membership Inference Vulnerability Evaluation

تحدد هذه الورقة نقطتي ضعف حرجتين في مسارات تقييم هجمات استنتاج العضوية (MIA) الفعالة — وتحديداً غياب معايرة معدل الإنذار الكاذب (FPR) عند دمج الدرجات عبر الأفراد، وتحيز المجتمع المحدود في تنفيذ خوارزمية LiRA — وتقترح حلولاً لضمان تقييم موثوق للثغرات الأمنية لأغراض تدقيق الخصوصية التفاضلية.

Joonas Jälkö, Gauri Pradhan, Ossi Räisä, Antti Honkela2026-05-26

🤖 machine learning

Visual-Redundancy-Controlled Parallel Decoding for Diffusion-Based Multimodal Large Language Models

تقدم هذه الورقة البحثية طريقة فك التشفير بالتحكم في الفائض البصري (VRCD)، وهي طريقة استنتاج خالية من التدريب للنماذج اللغوية الكبيرة متعددة الوسائط القائمة على الانتشار، تعمل على تخفيف قيود اختيار الرموز المستقل القائم على الثقة من خلال إعطاء الأولوية للمواقع المتكاملة بصرياً لتقليل الفائض وتحسين الدقة بشكل كبير في الاختبارات المعيارية متعددة الوسائط.

Yulin Yuan, Hongshuo Zhao, Xiangming Meng2026-05-26

💬 NLP

Clarify, Abstain or Answer? Strategising in Conversation with Belief-Augmented Generation

تقترح هذه الورقة "التوليد المعزز بالاعتقاد" (BAG)، وهو إطار عمل يستفيد من حالة الاعتقاد الخاصة بالنموذج اللغوي الكبير المستمدة من عينات متعددة للاستجابات لتقرير ما إذا كان سيجيب، أو يستوضح، أو يمتنع في المحادثات الغامضة بشكل مستقل، مما يحسن الدقة والوفاء بالاستراتيجية مقارنة بالتحفيز القياسي.

Joris Baan, Wilker Aziz, Barbara Plank, Raquel Fernández2026-05-26

🤖 machine learning

Geometric Evolution Maps: Extracting Stable Concept Probes from Transformer Residual Streams

تقدم هذه الورقة خرائط التطور الهندسي (GEMs)، وهي طريقة تتبع المسار الاتجاهي للمفاهيم في مسارات المتبقي (residual streams) لنماذج المحولات (transformers) لتحديد "طبقات التسليم" (handoff layers) المستقرة حيث تستقر التمثيلات، مما يسمح باستخراج مجسات مفاهيمية أكثر موثوقية من النهج التقليدية القائمة على الطبقات الثابتة أو ذروة الدرجات عبر بنيات متنوعة.

James Henry2026-05-26

🤖 machine learning

The Quantization Benefits of Residual-Free Transformers

توضح هذه الورقة أن الروابط المتبقية في نماذج المحولات تزيد من حدة عدم التوزيع الغاوسي للتنشيطات وأخطاء التكميم، إلا أن استبدالها ببنيات خالية من الروابط المتبقية يتم تدريبها عبر التهيئة المتعامدة والتحسين الطيفي ينتج نماذج ذات تنشيطات قريبة من التوزيع الغاوسي وتكون أكثر متانة بشكل ملحوظ تجاه التكميم منخفض البت مع فقدان ضئيل في أداء الدقة الكاملة.

Yiping Ji, Mahalakshmi Sabanayagam, Peyman Moghadam, Hemanth Saratchandran, Simon Lucey2026-05-26

🤖 machine learning

Conformalised imprecise inference for robust extrapolation under limited data

تقترح هذه الورقة إطار عمل للاستدلال غير الدقيق الموحد (conformalised) والمستقل عن النموذج، والذي يولد صناديق احتمالية (probability boxes) للتعامل بمتانة مع التحولات التوزيعية والحفاظ على تغطية موثوقة أثناء الاستقراء، لا سيما في سيناريوهات ندرة البيانات.

Yu Chen, Scott Ferson2026-05-26

→ السابق التالي ←