
-
生物通官微
陪你抓住生命科技
跳动的脉搏
基于源分流解耦与细粒度特征缓解的领域泛化全面解耦方法研究
【字体: 大 中 小 】 时间:2025年06月23日 来源:Neural Networks 6.0
编辑推荐:
为解决深度模型在跨域场景中的分布偏移(OOD)问题,山东某研究团队提出新型领域泛化(DG)范式SSDS-FFM。该研究通过源分流结构(SSDS)实现领域不变/特定特征的全面解耦,结合细粒度特征缓解(FFM)增强类判别性,在PACS/VLCS等数据集上验证了模型优越性,为稳定域不变表征学习提供新思路。
在人工智能蓬勃发展的今天,深度神经网络已在图像分类、目标检测等领域取得突破性进展。然而,这些成就背后隐藏着一个致命弱点——模型严重依赖训练数据与测试数据独立同分布(IID)的假设。现实世界中,医疗影像、自动驾驶等场景常面临领域偏移(domain shift)的挑战,导致模型在未知目标域表现骤降,这种现象被称为分布外泛化(OOD)问题。
为应对这一挑战,领域自适应(DA)和领域泛化(DG)应运而生。与DA不同,DG更贴近真实场景——训练阶段完全无法获取目标域数据,仅通过多个源域学习通用知识。现有方法如DANN通过对抗学习隐式解耦特征,但存在优化不稳定等问题;显式解耦方法虽分离了域不变/特定特征,却因共享特征提取器导致虚假依赖。更棘手的是,现有技术忽视域标签噪声影响,且类内特征空间存在局部错位和过度压缩问题。
山东某研究团队在《Neural Networks》发表的研究中,创新性提出SSDS-FFM范式。该方法首先构建源分流结构(SSDS),让域不变和域特定特征提取器共享浅层网络后分流,结合互信息最小化和域标签平滑技术,实现特征全面解耦。其次设计细粒度特征缓解(FFM)模块,通过选择性反向对比学习解决类内空间错位,在PACS、VLCS等数据集上取得SOTA效果。
关键技术包括:1) 共享浅层的双流网络架构;2) 基于互信息最小化的特征解耦;3) 域标签平滑技术;4) 选择性反向对比学习。实验使用PACS(4域7类)、VLCS(5类)等标准DG数据集验证,通过消融实验证实各模块有效性。
【源分流解耦结构(SSDS)】
通过对比传统单提取器结构与新型分流设计,实验证明共享浅层+独立深层的架构可使域不变特征分类准确率提升3.2%。互信息约束使特征独立性指标降低19%,域标签平滑技术显著缓解VLCS数据集中的域模糊问题。
【细粒度特征缓解(FFM)】
特征可视化显示,常规对比学习会导致同域样本在类内过度聚集。引入反向对比后,跨域样本相似度提升27%,同时保持94%的类间分离度。消融实验证实该模块使Office-Home数据集平均准确率提升4.5%。
【跨数据集验证】
在DomainNet大规模数据集上,SSDS-FFM以62.1%的平均准确率超越CDANN等基线方法8.3%,特别在"素描→真实照片"的极端域偏移场景下优势显著。
该研究开创性地将特征解耦的完整性、标签噪声鲁棒性和细粒度对齐纳入统一框架。军事领域(国防科技163计划支持)和医疗影像分析等场景可直接受益。方法论层面,分流设计为多目标优化提供新思路,特征缓解机制对解决表征学习中的过压缩问题具有普适价值。未来可扩展至视频理解、多模态学习等方向,推动AI系统在开放环境中的实际应用。
生物通微信公众号
知名企业招聘