A CNN-Transformer Encoder-Decoder for Image Captioning: Label Smoothing, Backbone Fine-Tuning, and Length-Normalized Decoding
Cet article présente une étude d'ingénierie systématique d'un modèle de légendage d'images basé sur un Transformer sur MS COCO 2017, démontrant que la combinaison du réglage fin partiel de l'épine dorsale CNN avec un décodage par recherche en faisceau normalisée par la longueur améliore significativement les métriques d'évaluation standards et la diversité lexicale par rapport à une référence gelée.