
-
生物通官微
陪你抓住生命科技
跳动的脉搏
基于DWT嵌入扩散模型的多中心多模态医学图像分割框架DM3diff的创新研究
【字体: 大 中 小 】 时间:2025年08月18日 来源:Knowledge-Based Systems 7.6
编辑推荐:
这篇研究提出了一种整合离散小波变换(DWT)与扩散概率模型(DPMs)的新型医学图像分割框架DM3diff,通过自适应小波特征聚合模块(SWT-FAM)和多阶段细节控制块(MS-DCB),有效解决了多中心/多模态/多源(3M)数据集中图像异质性、边界模糊和低对比度问题,在ISIC等数据集上Dice分数达92.4%,为临床诊断提供了高精度分割工具。
Highlight
我们提出DM3diff——这个将离散小波变换(DWT)与扩散概率模型(DPMs)创新性结合的医学图像分割框架,就像给计算机装上了"显微+降噪"双镜头。其核心科技SWT-FAM模块如同智能滤镜,能动态捕捉高频细节(比如癌细胞边缘的毛刺),而MS-DCB模块则像精密校准器,通过KL散度确保生成图像与目标结构的毫米级吻合。
Multi-center, Multi-modality, Multi-source Medical Image Segmentation
当面对"三多"数据集(多中心/多模态/多源)时,传统模型就像拿着固定焦距相机的摄影师:对模糊的肿瘤边界束手无策,遇到新型扫描设备就"晕镜头"。MAPSeg等先驱虽尝试用掩码自编码器突围,但DM3diff首次实现了在频率域和时间域的双重自适应——好比同时调节显微镜的景深和快门速度。
Methods
我们的方法暗藏玄机:扩散模型前向过程是天然低通滤波器,而逆向过程则变身智能频率选择器。传统傅里叶变换(FFT)像用固定网眼的渔网打捞特征,总漏掉关键细节;而DM3diff的SWT-FAM模块如同可变形渔网,在空间-频率域实现动态捕捉,特别擅长在t时刻的逆向过程中锁定倏忽即逝的病灶特征。
Datasets
实验涵盖皮肤癌(ISIC-2016)、结直肠癌(CVC系列)和脑瘤(BraTS-2021)三大战场。这些数据集就像医学影像的"奥林匹克运动会",汇集了全球多中心、多扫描设备的异构数据——从皮肤镜的2D彩照到MRI的3D体数据,充分考验模型的"跨界"能力。
Discussion
小波变换遇上扩散模型,就像给病理学家配了量子显微镜:既能看清细胞核的纹理(DWT优势),又能消除设备噪声(DPMs特长)。有趣的是,单纯依赖FFT就像用砂纸打磨钻石——去糙的同时也磨掉了珍贵特征,而我们的频率自适应机制则像纳米级抛光工艺。
Conclusions
DM3diff在三大癌症分割任务中全面超越CNN、ViT和SAM模型,其秘密在于把DWT的"局部洞察力"与DPMs的"全局想象力"完美结合。未来我们将聚焦两个方向:让模型推理快如闪电,以及教会AI理解不同光照条件——就像培训医生掌握各种手术灯下的诊断技巧。
生物通微信公众号
知名企业招聘