类别不匹配半监督学习的新视角:基于安全参数增强的鲁棒性提升方法
【字体:
大
中
小
】
时间:2025年10月11日
来源:Pattern Recognition 7.6
编辑推荐:
本文针对半监督学习(SSL)中未标记数据包含未见类别(ULUC-SSL)的挑战,创新性地从参数层面提出增强安全参数学习(ASPL)方法。通过设计幅度差异(MD)准则自动估计安全参数比例,结合层间幅度参数稀疏性(LMPS)评分识别关键参数,并采用安全参数增强(SPE)策略优化模型泛化能力,显著提升了图像分类、细粒度分类和分布外检测任务的性能。
我们的方法在标准图像分类、细粒度分类和分布外检测任务中的实验结果表明,ASPL显著优于现有最先进方法,证明了我们方法的普适性和有效性。
我们的方法可视为基于基础模型的后处理流程。例如,在CIFAR-10上训练VAT模型1000轮耗时2.1小时,而本方法采用双层优化(bi-level optimization)时,主要计算成本来自内层优化(基于小型验证子集优化掩码参数)。本方法训练300轮总耗时仅0.7小时,在存储资源方面仅需额外保存参数掩码(mask),其空间占用可忽略不计。
我们注意到方法在极端场景下可能存在局限:例如当数据噪声极高或类别分布严重不平衡时,掩码优化可能难以有效识别关键参数;对于大规模数据集,保存掩码的额外存储需求可能成为瓶颈。
本研究针对现实场景中未标记数据包含未见类别(ULUC-SSL)这一关键问题,提出了创新性的增强安全参数学习(ASPL)框架。该方法通过自动估计安全参数比例(MD准则)、精准识别参数重要性(LMPS评分)以及增强安全参数可靠性(SPE策略),系统性地提升了深度学习模型在复杂数据环境下的鲁棒性,为半监督学习的实际应用提供了重要技术支撑。
生物通微信公众号
生物通新浪微博
今日动态 |
人才市场 |
新技术专栏 |
中国科学人 |
云展台 |
BioHot |
云讲堂直播 |
会展中心 |
特价专栏 |
技术快讯 |
免费试用
版权所有 生物通
Copyright© eBiotrade.com, All Rights Reserved
联系信箱:
粤ICP备09063491号