Dual-encoder cross-scale dependency fusion network for placenta segmentation using MR and ultrasound images
本文提出了 DECSDF-Net,一种结合了专门的注意力与融合模块的双编码器网络,旨在有效解决边界模糊和模态差异等挑战,并在 MRI 和超声数据集上均实现了最先进的胎盘分割性能。
原始论文采用 CC BY 4.0 许可(https://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
胎盘是一个在怀孕期间形成的临时器官,充当着母亲与发育中胎儿之间至关重要的生命线。它负责交换营养物质和氧气,同时过滤废物,其健康状况是判断怀孕是否安全进展的主要指标。当胎盘功能不正常或位置阻挡了产道时,可能会给母亲和孩子带来严重的并发症。为了了解这个器官的状态,医生们高度依赖医学影像,主要使用两种不同的技术:一种是利用声波成像的超声波,另一种是利用强大磁铁和无线电波的磁共振成像(MRI)。虽然这些图像非常宝贵,但胎盘本身却是一个难以研究的对象。它没有固定的形状,其纹理因人而异,且图像经常会出现模糊的边缘或令人困惑的噪声,使得很难准确判断该器官的起始与结束位置。
几十年来,医生们一直通过手动在这些图像上描绘胎盘轮廓,以测量其大小和位置,这一过程缓慢、劳累且容易出现人为错误。近年来,计算机开始利用人工智能承担这项任务,具体来说是一种被称为神经网络的软件,它能够学习识别模式。然而,教计算机去“看见”胎盘,就像是在风暴肆虐的天空中寻找一朵特定的云;边界往往模糊不清,而且无论通过声波还是磁场观察,器官看起来都各不相同。现有的计算机程序经常难以应对这些变化,有时会遗漏器官的部分区域,或者画错线条。这就是为什么德阳人民医院和四川理工学院的研究人员开展的一项新研究提供了一个重要的进步。他们开发了一种专门的计算机系统,旨在自动且准确地绘制超声和磁共振图像中的胎盘图谱,克服了长期困扰自动化分析的视觉混乱问题。
研究人员构建了一个名为 DECSDF-Net 的系统,其运作基于一个简单而强大的理念:同时使用两只不同的“眼睛”来观察同一幅图像。该系统不是依靠单一路径来处理图像,而是将图像分为两个平行的流。一个流专注于捕捉胎盘的宏观、整体形状,而另一个流则密切关注精细的边缘细节。通过让这两个流并排运行,计算机可以从每种方法的优势中学习,将大局观与微观细节结合起来,从而对所见之物形成完整的理解。这种双重方法使得系统比以往仅使用单线分析的方法能更好地处理胎盘图像杂乱多变的特性。
为了使这种双重视觉更加锐利,研究人员在系统的“大脑”中加入了几种专门的工具。其中一个工具就像是图像的指南针,帮助计算机理解胎盘边缘的方向,无论其是水平还是垂直方向。这至关重要,因为胎盘通常具有弯曲或不规则的边界,而标准的软件可能会忽略这些特征。另一个工具则帮助系统连接不同层级信息之间的点。它提取对器官本质的深层抽象理解,并利用它来优化浅层的像素级细节,确保最终的轮廓不仅仅是一个猜测,而是与实际组织精准匹配。该系统还包含一个机制,使其能够同时通过不同的“镜头”观察图像,从而既能看到胎盘的整体,又能缩放观察特定的纹理。最后,当计算机构建最终地图时,它会逐渐整合所有这些不同的视角,通过层层叠加信息,直到呈现出一个清晰、完整的画面。
团队在两个大型真实患者图像集上测试了这一新系统:一组包含磁共振扫描图像,另一组包含超声扫描图像。他们将计算机的工作结果与“金标准”(即经验丰富的医生进行的人工描绘)进行了对比。结果在两种类型的影像中都表现得非常一致。在磁共振图像上,系统正确识别了胎盘的位置和形状,与人类专家的重合度很高,得分在 1.0 代表完美匹配的量表中达到了 0.8838。在更具挑战性的超声图像上(这类图像通常颗粒感更强、更难辨认),该系统的表现依然异常出色,得分达到了 0.8778。这些数字表明,该系统并非在瞎猜,它能够在边界模糊的图像中可靠地找到该器官。
为了准确了解新系统中哪些部分促成了成功,研究人员进行了一系列测试,每次移除一个工具。他们发现,如果没有双编码器设计,系统将难以同时捕捉形状和细节。当他们移除那个帮助连接不同信息层的工具时,准确度明显下降。每添加回一个组件,结果都会有所提升,这证明了这些特定技术的组合对于实现如此高的性能是必要的。该系统还表现出了极高的效率,处理一张图像仅需不到一秒钟,这足以满足繁忙医院环境下的实用需求。
与目前已有的其他先进计算机程序相比,这个新系统全面超越了它们。它以明显的优势击败了次优的方法,表明其结合不同类型视觉信息的独特方法是成功的关键。研究人员指出,尽管该系统具有高度准确性,但它是基于单一医院的数据进行训练的,这意味着它在不同机器或不同患者群体上的适用性仍需在更广泛的世界中进行测试。尽管如此,研究结果表明,通过赋予人工智能从多个角度观察医学影像并具备专门细节关注能力的方法,可以创造出能够协助医生进行更快、更准确的妊娠健康评估的工具。这项工作表明,产前护理的未来可能涉及能够洞察胎盘不可见细节的计算机,从而帮助确保母亲和宝宝更安全的结局。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。