Attention-guided local dynamic alignment: Boosting zero-shot classification of vision-language models
Este artigo propõe o Alinhamento Dinâmico Local Guiado por Atenção (ALDA), um método livre de treinamento que aprimora a classificação de visão-linguagem zero-shot ao empregar amostragem multiescala adaptativa impulsionada por atenção para reduzir o ruído de fundo e propagação iterativa bidirecional em um grafo bipartido região-descrição para modelar correlações semânticas mútuas, alcançando assim melhorias significativas de precisão em diversos benchmarks.