← 最新论文
⚡ electrical engineering

Soft-Attention Improves Skin Cancer Classification Performance

本文表明,将软注意力(Soft-Attention)机制集成到深度神经网络架构(VGG、ResNet、InceptionResNetv2 和 DenseNet)中,通过增强特征聚焦并抑制噪声,显著提高了在 HAM10000 和 ISIC-2017 数据集上的皮肤癌分类性能。

原作者: Soumyya Kanti Datta, Seyed Mohammad Abuzar Hashemi, Sargur N. Srihari, Mingchen Gao

发布于 2026-08-13
📖 1 分钟阅读☕ 轻松阅读

原作者: Soumyya Kanti Datta, Seyed Mohammad Abuzar Hashemi, Sargur N. Srihari, Mingchen Gao

原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明

想象一下,你正试图在一大堆杂乱无章的干草堆中寻找一根微小的特定针。但这不仅仅是一个普通的干草堆;这是一个由数千种不同颜色的丝线组成、还缠绕着零散稻草的干草堆,而你要找的那根针颜色又几乎与稻草完全一样。这正是计算机在诊断皮肤癌时面临的日常挑战。它们被喂入高分辨率的皮肤照片,但这些照片通常充满了“噪声”——比如与疾病无关的毛发、血管或阴影。在人工智能的世界里,“神经网络”就像一个通过观察数百万个示例来学习的超级聪明的学生。然而,如果没有帮助,这个学生往往会被杂乱的背景分心,把注意力放在头发上,而不是可疑的斑点上。为了解决这个问题,科学家们使用了一种叫做“注意力”(attention)的工具,它就像一个心理聚光灯,告诉计算机:“嘿,忽略那些头发;看这里,看这个点。”这篇论文探讨了一种被称为“软注意力”(Soft-Attention)的特定且温和版本的聚光灯,以研究它是否能帮助计算机成为更好的医生。

这项研究背后的研究人员想要观察,在不同类型的计算机视觉模型中加入这种“软注意力”聚光灯,是否真的能帮助它们更准确地发现皮肤癌。他们在两个大型皮肤图像集合(称为 HAM10000 和 ISIC-2017 数据集)上测试了他们的想法。可以将这些数据集想象成巨大的皮肤照片图书馆,其中一些显示的是无害的痣,另一些则显示出危险的癌症。团队选取了五种不同的“学生”模型(著名的架构如 VGG、ResNet 和 Inception ResNet),并赋予了它们一个特别的升级:一个软注意力模块。这个模块的作用就像一个智能过滤器。当计算机观察图像时,软注意力单元会创建一个“重要性”图谱。它将图像的重要部分(实际的病变)乘以一个高数值,并将不重要的部分(如毛发或血管)乘以一个接近于零的数值。这有效地减弱了噪声并增强了信号,使计算机能够将其能量集中在真正重要的事情上。

结果非常令人鼓舞。当他们在 HAM10000 数据集上测试这些升级后的模型时,带有软注意力升级的模型(特别是 Inception ResNet v2 版本)取得了 93.7% 的精确度(precision)。这是一个显著的飞跃,比之前的最佳基准提高了 4.7%。简单来说,有了聚光灯,计算机犯错的情况减少了。在第二个数据集 ISIC-2017 上,升级后的模型将其捕捉每一个癌症病例的能力(敏感度/sensitivity)比基准提高了 3.8%,达到了 91.6%。研究人员还观察了计算机在“看”哪里。他们将他们的软注意力图谱与另一种流行的技术 Grad-CAM 进行了比较。他们发现,虽然 Grad-CAM 有时会受到干扰,突出显示错误的区域或将注意力分散得太薄,但软注意力图谱始终紧紧聚焦在实际的皮肤病变上,忽略了周围的噪声。

这篇论文并不只是声称这有效;它进行了严格的测量。通过测试拆分数据的不同方式(例如使用 85% 的图像进行训练,其余部分用于测试),他们确认了他们的设置是可靠的。他们发现,使用 85% 的数据进行训练效果最好,优于使用较小比例数据训练的模型。他们还将他们的“软注意力”方法与其他最先进的模型进行了对比,发现其方法在准确度和敏感度方面始终表现更优。例如,在 ISIC-2017 数据集上,他们的模型比领先的基准模型在准确度上高出 3.6%,在敏感度上高出 3.8%。作者指出,具备敏感度至关重要,因为漏诊癌症比将一个无害的斑点标记出来进行二次检查的风险要大得多。

最终,这篇论文表明,为神经网络提供“软注意力”机制是处理复杂医疗图像的一种强大方式。它不仅让计算机变得更聪明,还让计算机的决策过程更加透明。因为软注意力模块创建了一个关于计算机正在看哪里的视觉图谱,医生实际上可以看到 AI 信任图像的哪些部分。这有助于建立人类医生与 AI 工具之间的信任。作者得出结论,这种方法对于高分辨率皮肤癌分类是有效的,并最终可以被构建到皮肤镜系统中,以协助皮肤科医生,帮助他们更有信心在干草堆中找到那根针。

您所在领域的论文太多了?

获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。

试用 Digest →