EFE-HCTNet:一种基于边缘特征的混合CNN-Transformer网络,用于自动识别超声图像中的神经结构

《Knowledge-Based Systems》:EFE-HCTNet: An Edge Feature Enhanced Hybrid CNN-Transformer Network for the Automated Identification of Nerves in Ultrasound Images

【字体: 大 中 小 】 时间:2026年03月29日 来源:Knowledge-Based Systems 7.6

编辑推荐:

  超声引导麻醉中神经分割精度不足,本研究提出Edge Feature Enhanced Hybrid CNN-Transformer Network(EFE-HCTNet),通过CNN-Transformer混合架构、边缘特征增强模块和多尺度注意力上采样模块,提升神经分割精度与计算效率,在四个数据集上IoU达69.53%-74.41%,优于UNet、AttUNet等模型。

  
丁成天|朱斌斌|孔玲思|王建林|王宇|张瑞毅|赵琦|姚玉东
东北大学医学与生物信息工程学院,沈阳,110819,中国

摘要

超声引导区域麻醉是一种广泛应用于外科手术和疼痛管理的局部麻醉技术,其中精确的神经定位对其效果至关重要。定位不准确可能导致麻醉失败和严重的并发症。为了提高神经阻滞的准确性和效率,本研究提出了一种针对超声图像的自动神经分割方法,称为边缘特征增强混合CNN-Transformer网络(EFE-HCTNet)。EFE-HCTNet结合了CNN-Transformer混合架构,以改进全局和局部特征的提取,并利用边缘特征增强模块通过利用语义边界信息来指导网络实现更精确的神经分割。解码器部分使用多尺度混合注意力上采样模块来增强特征融合并提高分割精度。我们创建了一个包含600张标注图像的臂丛神经数据集(BPdataset),并在几个公共数据集上评估了EFE-HCTNet的性能,包括股神经数据集(FNdataset)、臂丛神经干数据集(BPTdataset)和Nerve-UTP数据集(Nerve-UTPdataset)。实验结果表明,EFE-HCTNet在BPdataset、FNdataset、BPTdataset和Nerve-UTPdataset上的IoU分别为69.53%、74.41%、70.31%和71.62%。与UNet、AttUNet、TransUNet和SwinUNet等网络相比,EFE-HCTNet表现出更优越的分割性能。这些结果表明,EFE-HCTNet在提高区域麻醉的准确性和安全性方面具有显著潜力。数据和代码可在以下链接获取:https://github.com/TDC-ResearchLab/EFE-HCTNet

引言

区域麻醉是一种广泛应用于外科手术和疼痛管理的局部麻醉技术,其效果取决于精确的神经定位[1]。超声引导区域麻醉提供了实时的、直观的成像辅助,帮助麻醉师定位目标神经并施用麻醉剂[2]。然而,超声引导区域麻醉依赖于麻醉师对解剖结构的深刻理解和丰富的经验[3]。对于经验不足的从业者来说,存在麻醉失败或神经损伤的风险。此外,超声图像经常受到噪声、低对比度和边界模糊的影响,增加了神经结构识别的难度[4]。在复杂的临床情况下,例如肥胖、水肿或肌肉萎缩的患者中,超声图像的质量更差,进一步加剧了神经识别的挑战[5]。因此,开发自动化神经分割方法以提高分割的准确性和效率对于提高超声引导区域麻醉的成功率和安全性至关重要。
为了帮助医生在临床环境中更准确地识别目标神经并进行神经阻滞,越来越多的研究开始探索基于深度学习的神经识别技术,特别是针对超声图像中的神经结构分割。卷积神经网络(CNN)是用于超声图像中神经识别的主要深度学习模型。然而,尽管CNN在神经识别方法上取得了显著进展,但传统的CNN模型主要关注提取局部特征,可能忽略了图像中的全局信息。这在处理具有复杂背景和高噪声水平的超声图像时尤为重要。
为了解决这个问题,提出了基于CNN和Transformer的混合模型[6]、[7],旨在结合CNN在局部特征提取方面的优势与Transformer在全局信息建模方面的能力。然而,尽管CNN-Transformer混合模型在医学图像分割方面取得了积极进展,现有方法在超声图像的神经图像分割方面仍面临一些挑战。首先,许多混合模型依赖于简单的特征融合或连接方法,这可能导致全局和局部信息整合不足,从而影响分割精度。其次,虽然Transformer在全局上下文建模方面具有优势,但它们具有较大的参数规模和高计算复杂性。超声图像处理通常面临计算资源有限的问题,特别是在便携式超声设备中。许多模型无法在资源受限的临床麻醉环境中有效使用,限制了它们的实际应用。此外,现有混合模型在边界识别方面可能存在缺陷,特别是当神经结构的边界模糊或与周围组织的纹理相似时,会导致错误的分割。
我们的研究提出了一个边缘特征增强混合CNN-Transformer网络(EFE-HCTNet)模型来解决上述问题。EFE-HCTNet结合了CNN和Transformer的优势,在分割精度和计算效率之间取得了良好的平衡,使其更适合资源有限环境下的临床麻醉。具体来说,EFE-HCTNet引入了三个关键模块:全局-局部特征表示模块(GLFRM)、边缘特征增强模块(EFEM)和多尺度混合注意力上采样模块(MHAUM)。GLFRM结合了CNN在局部特征提取方面的能力和Transformer在全球信息处理方面的优势,增强了模型对复杂神经组织形态的理解和识别能力。EFEM增强了边缘信息,提高了网络捕捉边缘细节的能力。MHAUM有效地整合了多尺度特征,提高了特征融合并增强了分割精度。我们在臂丛神经数据集(BPdataset,我们开发的数据集)、股神经数据集(FNdataset)[8]、臂丛神经干数据集(BPTdataset)[9]和Nerve-UTP数据集(Nerve-UTPdataset)[10]上进行了广泛的实验。结果表明,EFE-HCTNet在这些数据集上的性能优于竞争模型,表现出更高的分割精度和更大的鲁棒性。本文的主要贡献总结如下。
1. 我们提出了一种边缘特征增强的混合CNN-Transformer网络,可以从超声图像中自动分割神经。EFE-HCTNet结合了CNN和Transformer的优势,而没有增加过多的参数,实现了高分割精度和效率。
2. 通过将ViT结构与多尺度CNN结构相结合,我们构建了一个高效的全局-局部特征表示模块,可以同时捕捉局部细节和全局上下文信息,增强了模型理解和识别神经组织复杂形态的能力。
3. 在解码器中,我们引入了多尺度混合注意力上采样模块和边缘特征增强模块。MHAUM促进了特征融合的效率。EFEM通过强调特征图中的边缘信息和几何细节,增强了模型识别神经边界的能力。
4. 我们构建了一个包含600张臂丛神经超声图像的数据集(BPdataset)。该数据集来自两家医院和三种不同的超声设备,所有图像均由具有丰富临床麻醉经验的医生标注。这个数据集可以支持模型性能评估和未来的技术发展。
本文的结构如下。第2节介绍了相关研究工作,包括超声图像中的神经分割和医学图像分割中的边缘增强方法。第3节介绍了用于评估的神经数据集以及所提出的EFE-HCTNet的详细描述。第4节介绍了实验设置和结果。第5节讨论了EFE-HCTNet和比较模型的性能、优势和劣势。最后,第6节总结了本文。

章节片段

超声图像中神经分割的当前研究

为了帮助医生在临床环境中更准确地识别目标神经并进行神经阻滞,越来越多的研究正在探索基于深度学习的神经识别技术,特别是针对超声图像中的神经结构分割。作为主要的深度学习模型,卷积神经网络(CNN)已被广泛应用于超声图像中的神经分割任务。Wang等人[9]开发了一个臂丛神经分割系统(BPSegSys)

材料与方法

在本节中,我们详细描述了使用的数据集和采用的数据预处理方法。此外,我们介绍了所提出的EFE-HCTNet网络的总体框架,并对网络中的每个模块进行了详细解释。

实验与分析

本节介绍了实验设置,包括损失函数、评估指标、实验配置和网络训练的详细信息。此外,我们通过比较分析分割网络、模块消融分析和结果可视化全面评估了EFE-HCTNet的性能。

模型稳定性和泛化分析

我们系统地评估了EFE-HCTNet在四个具有不同解剖结构和成像质量的超声神经数据集(FNdataset、BPTdataset、BPdataset和Nerve-UTPdataset)上的性能。如图12所示,条形图展示了16个模型在这四个数据集上的平均IoU和标准差(误差条)。结果表明,EFE-HCTNet在所有数据集上保持了领先的IoU,并表现出稳定的性能。

结论

本研究提出了一种边缘特征增强混合CNN-Transformer网络,用于自动分割超声图像中的神经。EFE-HCTNet结合了CNN和Transformer的优势,有效捕捉了局部细节和全局上下文信息,增强了模型理解和识别神经组织复杂形态的能力。具体来说,我们设计了全局-局部特征表示模块以提高特征提取的效率。

CRediT作者贡献声明

丁成天:写作 – 审稿与编辑,撰写原始草稿,软件,方法论,研究。 朱斌斌:数据管理,概念化。 孔玲思:数据管理。 王建林:数据管理。 王宇:研究。 张瑞毅:研究。 赵琦:研究。 姚玉东:写作 – 审稿与编辑,监督,概念化。

利益冲突声明

作者声明他们没有已知的竞争财务利益或个人关系可能影响本文所述的工作。

致谢

本研究得到了宁波市第三批健康青年技术骨干计划(授权号QNJSGG-3-ZBB)的支持。
相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号