7808 articoli
Il paper presenta MIRA, un agente multimodale di ragionamento iterativo che migliora l'editing delle immagini guidato da istruzioni complesse attraverso un ciclo di percezione, ragionamento e azione, ottenendo risultati competitivi rispetto ai sistemi proprietari.
Il paper presenta un framework unificato per la navigazione visivo-linguistica aerea che, operando esclusivamente su osservazioni RGB monocolari, supera le limitazioni dei metodi esistenti integrando percezione spaziale, ragionamento temporale e pianificazione delle azioni attraverso un'apprendimento multi-task guidato da prompt e strategie di ottimizzazione dei dati.
Il paper propone KD-OCT, un innovativo framework di distillazione della conoscenza che comprime un modello teacher ConvNeXtV2-Large in un efficiente EfficientNet-B2, mantenendo prestazioni diagnostiche cliniche per la classificazione OCT delle patologie retiniche e abilitando il deployment in tempo reale.
Il paper introduce VULCA-Bench, un benchmark multiculturale bilingue cinese-inglese composto da 7.410 coppie immagine-critica che valuta la comprensione culturale dei modelli visione-linguaggio attraverso un framework a cinque livelli, rivelando che il ragionamento di ordine superiore (L3-L5) rappresenta una sfida maggiore rispetto all'analisi visiva di base.
Il paper presenta FigEx2, un framework visivo-condizionato che localizza e genera didascalie a livello di pannello per figure scientifiche composte, superando le limitazioni delle descrizioni a livello di figura grazie a un modulo di fusione adattivo, una strategia di ottimizzazione ibrida supervisionata-RL e un nuovo benchmark BioSci-Fig-Cap, ottenendo prestazioni superiori e una notevole trasferibilità zero-shot.
Questo lavoro propone un meccanismo di pesatura delle telecamere, basato su schemi deterministici o apprendimento tramite cross-attention, per migliorare la sintesi di nuove viste in scenari a pochi esempi adattando l'importanza delle viste sorgente in base alla loro rilevanza rispetto alla vista target.
Il paper introduce DenseGRPO, un nuovo framework che risolve il problema della ricompensa sparsa nell'allineamento dei modelli di flusso per la generazione di immagini, sostituendo il feedback globale con ricompense dense a livello di passo e un meccanismo di esplorazione adattivo per migliorare la precisione e l'efficacia dell'addestramento.
Il paper propone un nuovo framework per il riconoscimento di persone tra immagini aeree e terrestri che, superando l'assunzione errata di uno spazio di similarità invariante alla geometria, introduce un modulo di trasformazione a basso rango (GIQT) e un meccanismo di prompt condizionato alla geometria per correggere esplicitamente le distorsioni geometriche indotte dalle differenze di viewpoint e scala.
Il paper presenta TimeBlind, un benchmark diagnostico basato su coppie minime che rivela come i modelli linguistici multimodali all'avanguardia, pur eccellendo nella semantica statica, falliscano nel comprendere la logica temporale fine, ottenendo un'accuratezza del 48,2% contro il 98,2% umano.
Il paper introduce LatentLens, un nuovo metodo interpretativo che rivela come i token visivi siano altamente comprensibili e semanticamente allineati alle rappresentazioni linguistiche in tutti i livelli dei modelli Vision-Language, superando le limitazioni delle tecniche esistenti come LogitLens.
Il paper propone un metodo che scala gli stati nascosti dei token delimitatori per mitigare la fuoriuscita di informazioni tra immagini nei modelli visione-linguaggio, migliorando così le prestazioni nella comprensione multi-immagine e in compiti testuali complessi senza costi aggiuntivi di addestramento o inferenza.
Il paper presenta HetroD, un dataset e benchmark ad alta fedeltà basato su droni progettato per colmare il divario nello sviluppo di sistemi di guida autonoma in ambienti eterogenei dominati da utenti vulnerabili della strada, fornendo annotazioni precise e dimostrando che i modelli attuali faticano a gestire le complesse dinamiche di questo tipo di traffico.
Il paper presenta TIPS, un approccio per la rilevazione di anomalie zero-shot che, sfruttando un modello visione-linguaggio addestrato con obiettivi spaziali e prompt decoupled, supera i limiti di CLIP migliorando le prestazioni di rilevazione e localizzazione su dataset industriali senza ricorrere a moduli ausiliari complessi.
Questo lavoro propone un metodo di generazione autoregressiva multiscale basato su una progressione a scacchiera che permette il campionamento parallelo bilanciato, ottenendo prestazioni competitive su ImageNet con un numero inferiore di passi di campionamento.
Il paper presenta V-Retrver, un framework di recupero multimodale guidato da agenti che supera i limiti dei metodi basati sul linguaggio integrando un processo di ragionamento intercalato in grado di generare ipotesi e verificarle attivamente tramite strumenti visivi esterni, ottenendo significativi miglioramenti nell'accuratezza e nell'affidabilità del ragionamento.
Lo studio rivela che, sebbene i modelli fondazionali per la TC del trauma addominale raggiungano una discriminazione paragonabile a quella dei modelli specifici per il compito, la loro scarsa specificità è determinata principalmente dall'eterogeneità delle classi negative (lesioni d'organo solido concomitanti) piuttosto che dalla sola prevalenza della patologia, indicando la necessità di un adattamento tramite training etichettato prima dell'implementazione clinica.
Il paper propone un framework di decomposizione tensoriale multi-vista che, analizzando video di passaggi a livello tramite embedding TimeSformer, identifica firme comportamentali latenti rivelando che la posizione geografica è un determinante più forte dell'ora del giorno e consentendo il raggruppamento delle intersezioni per interventi di sicurezza mirati.
Il paper presenta MALLVI, un framework multi-agente basato su modelli linguistici e visivi che abilita la manipolazione robotica in ciclo chiuso attraverso la coordinazione di agenti specializzati per la pianificazione, la percezione e il recupero dagli errori, migliorando così la generalizzazione e il successo nei compiti di manipolazione a zero-shot.
Questo articolo presenta un nuovo metodo per la rilevazione di copie di immagini che combina il tracciamento esplicito delle coordinate dei pixel (PixTrace) con una funzione di perdita contrastiva geometricamente guidata (CopyNCE) per migliorare l'apprendimento delle corrispondenze a livello di patch e raggiungere prestazioni all'avanguardia.
Questo articolo presenta DCAG, un framework di editing delle immagini senza addestramento per i Diffusion Transformer che, sfruttando simultaneamente i canali Key e Value per guidare l'attenzione, supera i metodi esistenti offrendo un controllo più preciso sull'intensità e sulla fedeltà delle modifiche.