11971 articles
Ce papier propose DTDR, une méthode de récupération dynamique des dépendances d'outils qui, en s'adaptant au contexte d'exécution évolutif des agents d'appel de fonctions, améliore considérablement les taux de réussite par rapport aux méthodes statiques existantes.
Cet article présente RMAAT, une architecture de transformateur inspirée des astrocytes qui intègre une mémoire récurrente compressée et un mécanisme d'attention linéaire pour surmonter la complexité quadratique des modèles à long contexte tout en maintenant une haute efficacité computationnelle.
Cet article propose les PiNets, un cadre d'apprentissage profond fondé sur le principe de lisibilité du modèle, qui garantit par conception que les explications des prédictions sont alignées avec le processus de décision réel du réseau, offrant ainsi des justifications fidèles, robustes et significatives.
Le papier présente AgentOCR, un cadre qui optimise l'efficacité des agents autonomes en convertissant leur historique d'interactions en images compactes via un cache optique segmenté et une auto-compression adaptative, réduisant ainsi considérablement la consommation de tokens et de mémoire tout en préservant plus de 95 % des performances.
Le papier présente TP-Blend, un cadre léger et sans entraînement qui fusionne de manière précise un objet et un style distincts dans les modèles de diffusion en combinant une fusion d'attention croisée optimisée par transport optimal et une fusion d'attention auto-attentionnelle sensible aux détails via une normalisation instance.
Ce papier propose Latent-GRPO, un cadre d'apprentissage par renforcement qui élimine le besoin de vérificateurs externes coûteux en exploitant la géométrie de l'espace latent pour générer des récompenses intrinsèques continues via un algorithme d'estimation de centroïde robuste, permettant ainsi d'accélérer l'entraînement des modèles de langage de plus de deux fois tout en maintenant leurs performances.
Cet article présente les Perceptual Counterfactual Geodesics (PCG), une méthode qui génère des explications contrefactuelles en suivant des géodésiques dans un espace latent muni d'une métrique riemannienne perceptuelle, garantissant ainsi des transitions sémantiquement valides et robustes aux artefacts hors-manifold.
Cet article présente la deuxième version d'une méta-analyse vivante révisée selon les directives PRISMA-LSR, qui intègre continuellement de nouvelles études sur l'impact de l'IA générative en mathématiques et révèle un effet positif modéré (g = 0,42) malgré une base de preuves encore limitée.
Cet article propose une nouvelle analyse asymptotique du mécanisme de brouillage qui, en introduisant un « indice de brouillage » basé sur la divergence de couverture, permet d'évaluer l'amplification de la confidentialité au-delà des limites du paramètre de pureté locale et offre un algorithme FFT efficace pour le calcul numérique de ces garanties.
Ce papier présente le cadre « Domain Expansion », qui utilise un mécanisme de regroupement orthogonal pour structurer l'espace latent en sous-espaces mutuellement exclusifs, évitant ainsi l'effondrement des représentations dans l'apprentissage multi-tâches et permettant une manipulation interprétable des concepts.
Cet article présente un cadre théorique basé sur le principe de l'information bottleneck déterministe pour réaliser un clustering parcimonieux et un pondération conjointe des caractéristiques, surmontant ainsi les défis posés par les données éparses et démontrant son efficacité sur des données génomiques réelles.
Cet article révèle que les explications fournies par les réseaux de neurones graphiques auto-explicatifs (SE-GNN) peuvent être fondamentalement déconnectées de la logique de prédiction du modèle, même en cas de performance optimale, et propose une nouvelle métrique de fidélité pour détecter ces défaillances dégénérées, qu'elles soient malveillantes ou naturelles.
Cette étude démontre que les modèles de récompense héritent de biais de valeurs spécifiques de leurs modèles de base préentraînés, privilégiant systématiquement l'« agence » pour Llama et la « communion » pour Gemma, indépendamment des données de préférence utilisées lors du fine-tuning.
Cet article présente CAAD-3K, un nouveau benchmark, et un cadre d'apprentissage de compatibilité conditionnelle basé sur des représentations vision-langage pour détecter les anomalies contextuelles en modélisant la compatibilité sujet-environnement, surpassant ainsi les méthodes existantes sur plusieurs jeux de données.
Les auteurs proposent le DDIS, un cadre génératif découplé en espace fonctionnel qui associe un opérateur neuronal à un modèle de diffusion pour résoudre des problèmes inverses d'EDP avec une efficacité supérieure en données et une meilleure précision que les approches couplées existantes.
Cet article propose une méthode de quantisation post-entraînement novatrice pour les modèles de diffusion, qui améliore l'efficacité en apprenant à attribuer des poids optimaux aux échantillons de calibration afin d'aligner les gradients à travers les différents pas de temps.
Ce papier présente le benchmark VDR-Bench, conçu pour évaluer de manière plus réaliste les capacités de recherche visuelle et textuelle des modèles de langage multimodaux en surmontant les limites des benchmarks existants, tout en proposant une méthode de recherche par recadrage itératif pour améliorer leurs performances.
Ce papier propose PSN-RLVR, une méthode qui améliore l'exploration dans l'apprentissage par renforcement avec récompenses vérifiables en perturbant les paramètres du modèle plutôt que les actions, permettant ainsi de découvrir de nouvelles stratégies de raisonnement et d'obtenir de meilleures performances sur des tâches mathématiques complexes.
Cet article établit la borne supérieure exacte de la divergence de Kullback-Leibler entre trois distributions gaussiennes multivariées satisfaisant une inégalité triangulaire relâchée, comblant ainsi une lacune théorique et démontrant son utilité pour la détection de données hors distribution et l'apprentissage par renforcement sûr.
Ce papier présente EDT-Former, un transformateur de jetons dynamiques guidé par l'entropie qui aligne efficacement des encodeurs de graphes figés avec des modèles de langage sans nécessiter leur réentraînement, permettant ainsi d'atteindre des performances de pointe dans la compréhension moléculaire multimodale.