
-
生物通官微
陪你抓住生命科技
跳动的脉搏
基于本征图像分解的低光照图像联合增强与实例分割网络研究
【字体: 大 中 小 】 时间:2025年06月13日 来源:Journal of Visual Communication and Image Representation 2.6
编辑推荐:
为解决低光照条件下图像增强(LLIE)与实例分割任务割裂导致的性能下降问题,研究人员提出了一种基于Retinex理论的交叉互补网络。该研究通过"分解-分割"策略将反射图输入分割网络,并设计语义特征融合模块(SFFB)和实例引导颜色直方图(ICH)损失函数,在LIS数据集上实现了增强与分割性能的同步提升,为自动驾驶等场景提供新解决方案。
在自动驾驶、医疗诊断等领域,低光照环境下的图像分析始终是计算机视觉领域的重大挑战。传统方法采用"先增强后分割"的串行流程,却陷入两难困境:增强算法为追求视觉效果过度处理细节,反而损害了分割精度;而分割网络产生的丰富语义信息又未能反哺增强过程。这种割裂的处理方式导致现有系统在极端光照条件下性能骤降,严重制约了夜间安防、内窥镜手术等关键场景的应用。
针对这一瓶颈问题,中国某高校的研究团队在《Journal of Visual Communication and Image Representation》发表创新成果,提出基于本征图像分解的联合优化框架。该研究突破性地将Retinex理论与深度学习相结合,通过反射图的物理属性稳定性提升分割鲁棒性,同时利用分割产生的实例语义指导差异化增强,形成双向促进的闭环系统。实验表明,该方法在LIS数据集上同时刷新了低光照增强(LLIE)和实例分割的指标,为解决光照敏感问题提供了新范式。
关键技术包括:1) 基于Retinex理论的分解模块生成光照不变反射图;2) 语义特征融合模块(SFFB)实现实例语义与增强特征的对齐;3) 实例引导颜色直方图(ICH)损失函数保持跨实例颜色一致性;4) 采用包含8类物体的LIS数据集进行验证。
【Motivations】
研究基于Retinex理论的核心发现:反射图R承载物体本质特征,而光照图L仅与环境相关。通过数学推导证明,将反射图作为分割输入可有效克服光照干扰,这一理论突破为"分解-分割"策略奠定基础。
【Dataset and metrics】
在包含2230对图像的LIS数据集上,该方法在AP50
指标上超越基线模型6.3%,同时PSNR提升2.1dB。消融实验证实SFFB模块和ICH损失的协同作用,其中语义融合使增强结果的NIQE指标改善19%。
【Discussion】
与传统串联结构对比,交叉互补架构展现出独特优势:反射图输入使分割网络在极暗区域(照度<0.1lux)的漏检率降低42%;而语义引导的增强则有效抑制了过曝现象,在手术显微镜等医疗场景验证了普适性。
【Conclusion】
该研究开创性地构建了LLIE与实例分割的协同优化体系,其理论价值体现在:1) 证实反射图的物理属性对分割鲁棒性的提升作用;2) 建立实例语义与像素增强的映射关系。实际应用中,该方法已成功应用于车载夜视系统,在ADAS(高级驾驶辅助系统)测试中误报率降低35%,为智能医疗、农业监测等低光照场景提供可靠技术支撑。
生物通微信公众号
知名企业招聘