编辑推荐:
在医学影像分析中,为解决全自动医学图像分割标注成本高、泛化能力差,交互式分割增加标注负担等问题,研究人员开展 Slice Segmentation Propagator(SSP)研究,实验结果良好,为医学图像分割提供新方案。
在医学领域,医学图像分割就像是医生的 “透视眼”,能精准地把感兴趣的解剖结构、肿瘤等从背景中分离出来,这对疾病的评估和治疗决策起着关键作用。以往的全自动医学图像分割方法,虽然借助卷积神经网络(CNNs)取得了一定成果,但却存在诸多问题。一方面,医学数据集存在长尾分布,一些发病率低的疾病样本少,获取精确的分割掩码成本极高,导致这些情况下的分割效果很差,难以应用到实际中;另一方面,这些模型的泛化能力不足,在一个结构上训练的模型很难用于分割新的结构。而交互式分割,像 Segment Anything Model(SAM)这类方法,虽然表现不错,但需要多次人机交互,大大增加了标注人员的负担。为了攻克这些难题,来自国内的研究人员开展了一项关于 Slice Segmentation Propagator(SSP)的研究。这项研究成果发表在《Biomedical Signal Processing and Control》上,为医学图像分割领域带来了新的曙光。
研究人员采用了一系列关键技术方法来推进研究。在模型架构方面,提出了 Slice Segmentation Propagator(SSP)框架,其中包含 Local Attention Reading Module(LARM)模块。该模块能够融入医学先验知识,建立更高效、稳健的切片间像素对应关系。此外,还提出了两种测试时更新策略,即循环一致性机制和通过人工增强的域适应方法,以此来抑制误差传播,提升模型对新结构的泛化能力。
下面来详细看看研究结果:
- 模型架构:研究人员提出了 SSP 框架,通过 LARM 模块融入医学先验知识。利用这个模块,模型可以更有效地建立切片之间的对应关系,为后续的掩码传播打下坚实基础,让参考注释能够更准确地在整个 3D 体积中传播。
- 测试时更新策略 - 循环一致性机制:引入循环一致性机制来抑制掩码传播过程中的误差积累。通过强制模型在参考切片上做出一致的预测,使得分割结果更加稳定可靠,减少错误随着传播不断放大的问题。
- 测试时更新策略 - 人工增强的域适应:采用人工增强的域适应方法,在测试时对模型进行训练。这样可以帮助模型更好地适应新的、未见过的解剖结构,增强模型的泛化能力,让在特定结构上训练的传播模型在测试全新结构时也能有不错的表现。
- 实验验证:研究人员在三个数据集上对四种解剖结构进行了全面的实验。无论是在结构内(同一结构的测试)还是跨结构(测试与训练集不同的结构)的场景下,SSP 框架都展现出了令人期待的结果,证明了该方法的有效性和实用性。
在研究结论和讨论部分,研究人员提出的 SSP 框架成功地将单切片注释传播到整个 3D 医学体积中。该框架充分利用了医学局部性先验,通过局部注意力机制有效地在切片之间建立了密集的对应关系,同时维持了一个运行内存库来缓解误差积累问题。两种测试时更新策略进一步提升了传播性能和泛化能力。与传统基于自然图像的分割传播器(如 STM、STCN)不同,SSP 模型利用了医学领域特定的先验知识,这对于医学成像中的准确分割至关重要。这项研究为医学图像半自动化分割提供了一种更有效的解决方案,有望在未来的临床实践和医学研究中得到广泛应用,帮助医生更高效、准确地进行疾病诊断和治疗规划,推动医学影像分析领域的发展。