🤖 machine learning

A law of robustness for two-layer neural networks with arbitrary weights

यह शोध पत्र मनमाने भार (arbitrary weights) वाले दो-परत वाले न्यूरल नेटवर्क के लिए एक निकट-इष्टतम मजबूती के नियम (near-optimal law of robustness) को सिद्ध करता है, जो यह दर्शाता है कि शोर युक्त डेटा को फिट करना एक उच्च लिप्सचिट्ज़ स्थिरांक (Lipschitz constant) के लिए मजबूर करता है जब तक कि नेटवर्क की चौड़ाई पर्याप्त रूप से बड़ी न हो, जिसे एक नए फलन-स्थान कवरेज तर्क (function-space covering argument) और एक रिजिडिटी लेम्मा (rigidity lemma) को स्थापित करके सिद्ध किया गया है जो आयाम d3d \ge 3 में किंक गुणांकों (kink coefficients) को नियंत्रित करता है।

Yitzchak Shmalo2026-07-10
💻 computer science

GradInf: Gradient Estimation as Probabilistic Inference

यह शोध पत्र GradInf को प्रस्तुत करता है, जो एक संभाव्य प्रोग्रामिंग प्रणाली (probabilistic programming system) है जो कपलिंग (coupling) और गुणनखंडन (factorization) जैसे स्रोत-से-स्रोत रूपांतरणों (source-to-source transformations) के माध्यम से ग्रेडिएंट अनुमान समस्याओं को औपचारिक रूप से संभाव्य अनुमान समस्याओं में कम करके, सुदृढ़ और कुशल ग्रेडिएंट अनुमानकों के डिज़ाइन को स्वचालित करता है।

Gaurav Arya, Mathieu Huot, Moritz Schauer, Alexander K. Lew, Feras A. Saad2026-07-10
🤖 machine learning

When Does Continual Learning Require Learning

यह शोध पत्र तर्क देता है कि बड़े भाषा मॉडलों (लार्ज लैंग्वेज मॉडल्स) के लिए निरंतर शिक्षण (कंटीन्यूअस लर्निंग) को स्थानिक और कालिक परिवर्तनों के बीच सक्षमता बढ़ाने के इर्द-गिर्द पुनर्गठित किया जाना चाहिए, जो एक एकीकृत मूल्यांकन प्रोटोकॉल के माध्यम से यह प्रदर्शित करता है कि कोई भी एकल विधि सभी परिदृश्यों में उत्कृष्ट नहीं है और इष्टतम रणनीति—चाहे वह मॉडल के भार (वेट्स) को अपडेट करना हो या बाहरी स्कैफोल्डिंग का उपयोग करना हो—मौलिक रूप से पर्यावरणीय परिवर्तन के विशिष्ट पैटर्न पर निर्भर करती है।

Anne Harrington, Nayan Saxena, Michael Murphy, Anastasia Borovykh, Zeyu Yun, Sridhar Kamath, Ara Eindra Kyi, Trevor Darr (…)2026-07-10
🤖 machine learning

NFTR: From Provable Mode-Averaging to Geodesic Subgoal Selection in Offline Goal-Conditioned RL

यह शोध पत्र NFTR का प्रस्ताव करता है, जो एक ऑफलाइन गोल-कंडीशन्ड (goal-conditioned) RL विधि है जो कंडीशनल नॉर्मलाइजिंग फ्लोज़ (conditional Normalizing Flows) को एक ट्राइएंगल-स्लैक रीवेटिंग (triangle-slack reweighting) तंत्र के साथ जोड़ता है ताकि HIQL जैसे पिछले सबगोल चयन दृष्टिकोणों में निहित मोड कोलैप्स (mode collapse) और ऑप्टिमिस्टिक बायस (optimistic bias) को प्रमाणिक रूप से दूर किया जा सके।

Erdemt Bao, Xing Lei, Jun Chen2026-07-10
💻 computer science

Agentic AI and Retrieval-Augmented Models in Straight-Through Underwriting

यह शोध पत्र छोटे वाणिज्यिक पॉलिसियों की स्ट्रेट-थ्रू अंडरराइटिंग के लिए एक एजेंटिक एआई फ्रेमवर्क का प्रस्ताव और मूल्यांकन करता है, जो यह प्रदर्शित करता है कि लक्षित रिट्रीवल, थर्ड-पार्टी डेटा चेक्स और स्पष्ट नियम मूल्यांकन को संयोजित करने वाला एक मल्टी-एजेंट सिस्टम, सिंगल-एलएलएम (single-LLM) और नैव आरएजी (naive RAG) बेसलाइन की तुलना में बेहतर प्रदर्शन करता है, विशेष रूप से उन जटिल परिदृश्यों में जिनमें पारदर्शिता और ऑडिटेबिलिटी की आवश्यकता होती है।

Robert Richardson, Josh Meyers, Brian Hartman, David Sandberg2026-07-10
💻 computer science

Feedback Manipulation Regularization: Enabling Offline Agent Alignment for Imitation Learning

यह शोध पत्र फीडबैक मैनिपुलेशन रेगुलराइजेशन (FMR) को प्रस्तुत करता है, जो एक एल्गोरिदम-अज्ञेय (algorithm-agnostic) विधि है जो मूल्यांकन संबंधी फीडबैक का एक सुधारात्मक संकेत के रूप में उपयोग करती है ताकि ऑफलाइन, पूर्णतः क्रमिक निर्णय लेने वाले परिवेशों में इमिटेशन लर्निंग पॉलिसियों के संरेखण (alignment) में महत्वपूर्ण सुधार किया जा सके, जिससे दुर्लभ या शोर युक्त प्रदर्शन डेटा के साथ भी मिसअलाइनमेंट में 98% तक की कमी आती है।

Benjamin Poole, Minwoo Lee2026-07-10
🤖 machine learning

Distributed Sketching on Data Partitions for OLS Regression

यह शोध पत्र विभाजित डेटा उपसमुच्चयों पर साधारण न्यूनतम वर्ग प्रतिगमन (ordinary least squares regression) के लिए वितरित स्केचिंग (distributed sketching) का विश्लेषण करता है, यह प्रदर्शित करते हुए कि प्राप्त अनुमानकों (estimators) का औसत निकालने से प्राप्त अतिरिक्त हानि (excess loss), पूरे डेटा की स्केचिंग के तुलनीय होती है जब उपसमुच्चय सहप्रसरणों (subset covariances) के बीच विचलन कम होता है।

Luyuan Yang, Brayden Garner, Shayan Shafaei, Chao Lan2026-07-10
🤖 machine learning

Multimodal Unlearning Across Vision, Language, Video, and Audio: Survey of Methods, Datasets, and Benchmarks

यह सर्वेक्षण विजन, लैंग्वेज, ऑडियो और वीडियो मोडैलिटीज में मल्टीमॉडल अनलर्निंग विधियों, डेटासेट्स और बेंचमार्क का एक एकीकृत, सिस्टम-ओरिएंटेड वर्गीकरण प्रस्तुत करता है, जो मॉडल की समग्र उपयोगिता को बनाए रखते हुए फाउंडेशन मॉडल्स से संवेदनशील या कॉपीराइट वाली जानकारी को चुनिंदा रूप से हटाने की चुनौती का समाधान करता है।

Nobin Sarwar, Shubhashis Roy Dipta, Zheyuan Liu, Vaidehi Patil2026-07-10
🤖 machine learning

path_boost: A Python Package for Interpretable Graph-Level Prediction using Path-Based Gradient Boosting

यह शोध पत्र **path_boost** को प्रस्तुत करता है, जो एक ओपन-सोर्स पायथन पैकेज है जो प्रेडिक्टिव लेबल वाले पथों (predictive labeled paths) की खोज और संयोजन को स्वचालित रूप से करने के लिए **PathBoost** एल्गोरिदम को लागू करता है, ताकि रिग्रेशन और क्लासिफिकेशन कार्यों के लिए व्याख्या योग्य ग्राफ-स्तरीय भविष्यवाणियां प्रदान की जा सकें, जो ब्लैक-बॉक्स ग्राफ न्यूरल नेटवर्क के एक पारदर्शी विकल्प के रूप में कार्य करता है।

Claudio Meggio, Johan Pensar, Riccardo De Bin2026-07-10
🤖 machine learning

Linear Attention Architectures: Mechanisms, Trade-offs, and Cross-Layer Routing

यह शोध पत्र 350M-पैरामीटर वाले मॉडलों का उपयोग करते हुए सॉफ्टमैक्स और चार लीनियर अटेंशन आर्किटेक्चर (डेल्टानेट, गेटेड डेल्टानेट, किमी डेल्टा अटेंशन और गेटेड डेल्टानेट-2) का एक तुलनात्मक अध्ययन प्रस्तुत करता है ताकि उनके तंत्र, प्रदर्शन संबंधी ट्रेड-ऑफ और एक प्रस्तावित क्रॉस-लेयर वैल्यू रूटिंग तंत्र की प्रभावकारिता का विश्लेषण किया जा सके, जिसमें यह पाया गया कि मुऑन के साथ किमी डेल्टा अटेंशन न्यूनतम वैलिडेशन लॉस प्राप्त करता है जबकि एडमडब्ल्यू के साथ गेटेड डेल्टानेट उच्चतम थ्रूपुट प्रदान करता है।

Tommaso Cerruti, Tim Rieder, George Rowlands, Lingfeng Jin, Imanol Schlag2026-07-10