🤖 machine learning

When Losses Align: Gradient-Based Composite Loss Weighting for Efficient Pretraining

تقترح هذه الورقة طريقة ثنائية المستوى قائمة على التدرج تتعلم بكفاءة أوزان خسارة ما قبل التدريب عبر الإنترنت من خلال محاذاة التدرجات المركبة مع الأهداف النهائية، مما يقلل بشكل كبير من التكلفة الحسابية لضبط المعلمات الفائقة مقارنة بالبحث العشوائي أو البايزي مع مطابقة الأداء أو تحسينه.

Ivan Karpukhin, Andrey Savchenko2026-05-11
🤖 machine learning

SMT-Based Active Learning of Weighted Automata

تقدم هذه الورقة خوارزمية تعلم نشط قائمة على حل مشكلات الإرضاء (SMT) ومعلمية للآلات ذات الأوزان غير الحتمية، تضمن نتائج دنيا، وتضمن الإنهاء بالنسبة للنصف حقلي المجموعات المنتهي، وتُظهر كفاءة وتراصاً فائقين مقارنة بالطرق القائمة في تجارب مستفيضة.

Tiago Ferreira, Kevin Batz, Alexandra Silva2026-05-11
🤖 machine learning

Pre-trained Tabular Foundation Models as Versatile Summary Networks for Neural Posterior Estimation

تقدم هذه الورقة البحثية PFN-NPE، وهو إطار عمل لا يتطلب تدريباً يستفيد من نموذج TabPFN المدرب مسبقاً كشبكة تلخيص متعددة الاستخدامات ونمطية للاستدلال البايزي القائم على المحاكاة، مما يبرهن على قدرته على تقريب التوزيعات اللاحقة بفعالية عبر إعدادات متنوعة مع تسليط الض الضوء على نقاط قوته في استعادة التوزيعات الهامشية وعيوبه في التقاط هياكل التوزيعات اللاحقة المشتركة.

Elliot Pickens, Chiraag Gohel, Sidharth Satya2026-05-11
📊 statistics

POETS: Uncertainty-Aware LLM Optimization via Compute-Efficient Policy Ensembles

تقدم الورقة البحثية إطار عمل POETS، وهو إطار عمل كفء حوسبياً يستفيد من مجموعات السياسات ذات الهياكل الخلفية المشتركة وفروع LoRA المستقلة لتنفيذ أخذ عينات "ثومبسون" المدرك لعدم اليقين لتحسين النماذج اللغوية الكبيرة (LLM)، محققاً كفاءة عينة هي الأفضل في حالتها في مهام الاكتشاف العلمي والتعلم التعزيزي.

Nicolas Menet, Andreas Krause, Abbas Rahimi2026-05-11
💬 NLP

Tracing Uncertainty in Language Model "Reasoning"

تقدم هذه الورقة طريقة لتقدير وتحليل ملفات تعريف عدم اليقين لمسارات استدلال النماذج اللغوية، مما يثبت أن الأنماط المتميزة في هذه الملفات يمكنها التنبؤ بصحة الإجابة بدقة عالية وتمكين الكشف المبكر عن الأخطاء.

Nils Grünefeld, Bertram Højer, Philipp Mondorf, Barbara Plank, Anna Rogers, Christian Hardmeier, Stefan Heinrich, Jes Fr (…)2026-05-11
🤖 machine learning

Spectral Surgery: Class-Targeted Post-Hoc Rebalancing via Hessian Spike Perturbation

تقدم هذه الورقة "الجراحة الطيفية" (Spectral Surgery)، وهي تقنية تحسين لاحقة تُحسن أداء التصنيف في مجموعات البيانات غير المتوازنة من خلال الاضطراب المباشر لأوزان النموذج على طول المتجهات الذاتية لنتوءات هسيان (Hessian spike eigenvectors) لإعادة توازن دقة كل فئة دون إعادة التدريب.

Hugo Vigna, Samuel Bontemps2026-05-11
⚛️ nuclear theory

Neural Operators as Efficient Function Interpolators

تعيد هذه الورقة صياغة المشغلات العصبية بوصفها مستنتجات دوال فعالة من خلال تقديم فضاء قاعدي مساعد، حيث تثبت من خلال اختبارات مرجعية تحليلية وتطبيق نموذج الكتلة النووية أنها تحقق دقة تضاهي أحدث المعايير وبعدد أقل بكثير من المعلمات وأوقات تدريب أسرع مقارنة بالشبكات العصبية القياسية.

Vasilis Niarchos, Angelos Sirbu, Sokratis Trifinopoulos2026-05-11
🤖 machine learning

Toward Privileged Foundation Models:LUPI for Accelerated and Improved Learning

تقدم هذه الورقة PIQL، وهو إطار عمل مبتكر يستفيد من المعلومات المتميزة — مثل إحصائيات مجموعة البيانات وتشفيرات البرامج المولدة للبيانات — لتسريع التقارب، وتحسين التعميم، وتقليل المتطلبات الحسابية لنماذج التأسيس الجدولي.

Xueying Ding, Leman Akoglu2026-05-11
🤖 AI

Text-to-CAD Evaluation with CADTests

تقدم هذه الورقة CADTestBench، وهو أول معيار اختبار يعتمد على الاختبارات لتقنية "النص إلى CAD" والذي يستخدم اختبارات برمجية قابلة للتنفيذ لتقييم وتوجيه توليد نماذج CAD بصرامة، مما يثبت أن هذا النهج يمكنه التفوق على أداء الأساليب الحالية.

Dimitrios Mallis, Marco Wang, Ahmet Serdar Karadeniz, Elisa Ricci, Anis Kacem, Djamila Aouada2026-05-11
🤖 machine learning

GRASP -- Graph-Based Anomaly Detection Through Self-Supervised Classification

يُعد GRASP نظاماً للتحقق من أصل العمليات يعتمد على التعلم الذاتي والرسوم البيانية، حيث يقوم بحجب وإعادة بناء معلومات الملفات التنفيذية للعمليات لتحديد الشذوذ دون الاعتماد على عتبات محددة مسبقاً، مما يحقق كشفاً قوياً لكل من التهديدات المتقدمة المستمرة المعروفة وغير المعروفة.

Robin Buchta, Carsten Kleiner, Felix Heine, Gabi Dreo Rodosek2026-05-11