融合卷积与注意力机制的混合深度学习框架用于产前超声胎儿及亚解剖结构多标签自动分割

《Diagnostics》:FetalSegNet: Automatic Segmentation of the Fetus and Sub-Anatomical Structures in Prenatal Ultrasound Images Using Hybrid Deep Learning Models

【字体: 大 中 小 】 时间:2026年11月04日 来源:Diagnostics 3.8

编辑推荐:

  背景与目标:产前超声(US)图像中胎儿解剖结构自动分割面临低组织对比度、散斑噪声、声学阴影、胎儿体位多变以及部分结构仅局部可见等挑战。研究人员开发并评估了FetalSegNet,一种可同时分割胎儿整体及头部、手臂、腿部和心脏等多标签深度学习框架。方法:构建包含

  
背景与目标:产前超声(US)图像中胎儿解剖结构自动分割面临低组织对比度、散斑噪声、声学阴影、胎儿体位多变以及部分结构仅局部可见等挑战。研究人员开发并评估了FetalSegNet,一种可同时分割胎儿整体及头部、手臂、腿部和心脏等多标签深度学习框架。方法:构建包含217例受试者、3321张产前超声图像的数据集,在专家监督下进行像素级标注;设计四种混合编码器-解码器配置,编码器采用EfficientNetV2-M与MaxViT-S,解码器采用UNet++与特征金字塔网络(FPN),输出五个独立二值掩码通道。在独立测试集上以Dice相似系数(DSC)、交并比(IoU)、精确率、召回率、第95百分位Hausdorff距离(HD95)与平均对称表面距离(ASSD)进行评价,并以结构存在性分类指标及HiResCAM可解释性分析辅助验证。结果:EfficientNetV2-M与UNet++组合总体性能最优,DSC达0.9232、IoU为0.8746、HD95为4.23 mm、ASSD为1.02 mm;头部与胎儿整体分割更稳定,腿与心脏类表现相对较弱但仍可接受。各结构存在性判断具有高F1分数,HiResCAM显示模型激活主要集中于对应解剖区域。结论:FetalSegNet通过统一多标签框架与独立输出通道,可同时刻画胎儿及亚解剖结构,并结合边界指标与激活可解释性,为产前超声自动分析提供了集成化研究路径。
研究背景与问题提出
产前超声(ultrasound, US)因无电离辐射、实时、低成本而成为常规产前评估核心手段,但图像解释高度依赖操作者经验与采集质量。胎儿解剖结构在超声中常表现为边界模糊、回声不均、散斑噪声强、声学阴影明显,且随孕周、体位与切面变化而形态差异大;传统图像处理与单结构模型难以在同一画面中兼顾胎儿整体与头、肢、心等亚结构的空间重叠关系。既往研究多聚焦单一结构(如头、腹),缺乏统一、可重叠标注、可解释的多结构分割框架,限制了自动化生物测量与临床工作流落地。
研究人员开展的工作与结论意义
研究人员提出FetalSegNet,一种统一的多标签(multi-label)分割框架:将胎儿、头部、手臂、腿部和心脏分别建模为独立二值掩码通道,允许空间重叠,而非互斥多类分割。基于217例单胎、正常发育妊娠受试者的3321张专家像素级标注图像,系统比较两种编码器(EfficientNetV2-M、MaxViT-S)与两种解码器(UNet++、特征金字塔网络FPN)组合的四种配置。结果显示EfficientNetV2-M+UNet++综合最优(DSC 0.9232,IoU 0.8746,HD95 4.23 mm,ASSD 1.02 mm),头部与胎儿整体分割最稳,腿与心脏较难;结构存在性判断F1与准确率均高;HiResCAM证明激活集中于对应解剖区。该工作意义在于用一套框架替代多模型流水线,保留重叠标注语义,并为超声分割提供重叠度+边界+可解释三维评价范式。
主要关键技术方法
样本来自Bursa City Hospital retrospective routine prenatal US(15–24周单胎正常妊娠),视频抽帧后经专家审图与去重得到3321张图像-掩码对,按受试者级别划分训练/验证/测试集。预处理采用零填充保几何、强度归一化与动态数据增强(翻转、弹性形变、亮度噪声等)。模型端构建四类混合架构:卷积高效编码器EfficientNetV2-M与多轴注意力编码器MaxViT-S,分别配嵌套跳跃连接的UNet++与多尺度自顶向下融合的FPN解码器;损失为E-Focal Loss与Dice Loss加权,输出五通道sigmoid独立概率图。评估除DSC、IoU、精确率、召回率外,利用图像侧1 cm刻度估计像素间距,将HD95与ASSD转为毫米;并以结构存在性分类与HiResCAM能量比做可解释校验。
研究结果
训练与验证行为:四种配置训练损失快速下降后趋稳,验证DSC后期在0.90–0.92区间波动;EfficientNetV2-M+UNet++在第91轮获最高验证DSC 0.9261,收敛更平稳。
整体分割性能:在524张独立测试图上,四配置平均DSC均>0.89;EfficientNetV2-M+UNet++以DSC 0.9232、IoU 0.8746、HD95 4.23 mm、ASSD 1.02 mm居首,说明区域重叠与边界对齐同步最优。
类级别结果:头部DSC最高(EfficientNetV2-M+UNet++达0.9677),因体积大、边界清;胎儿整体次之;手臂对解码器敏感(UNet++优于FPN);腿类最小(0.82–0.88),受细长形态与部分可见影响;心脏各模型接近(0.88–0.90),但弱于头与躯干。
结构存在性分析:各结构F1均值0.93–0.95、准确率0.96–0.97;召回普遍高,手臂精确率略降,提示偶发假阳性区域,但“是否出现”判断可靠。
可解释性(HiResCAM):类专属激活能量比在胎儿与头部最高,腿部最低且跨模型波动;可视化显示关注区与专家标注空间一致,尤大结构更紧凑,证明模型并非依赖背景伪影。
讨论与结论翻译
讨论指出:多标签独立通道合理刻画重叠解剖,但未加解剖一致性约束;单中心数据、间接像素间距估计、小结构样本不均衡与标注不确定性是主要局限;未来需多中心验证、时序信息(如ConvLSTM)、强化学习帧选择与软标签。结论原文要义为:FetalSegNet以混合深度学习与独立掩码通道,实现产前超声中胎儿及亚结构同时分割;EfficientNetV2-M+UNet++最优,头与胎儿强、腿与心弱;存在性判断准确、HiResCAM空间可信。该框架在外部验证前尚属技术可行性证明,后续应面向多设备、空间校准与下游生物测量临床转化。
这篇论文解读已完成,接下来可以选择一个方向继续深化:
相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号