基于强度和偏振双重模态的增强去雾技术

《Optics and Lasers in Engineering》:Enhanced dehazing based on dual modal of intensity and polarization

【字体: 时间:2025年09月29日 来源:Optics and Lasers in Engineering 3.7

编辑推荐:

  基于强度与偏振度的双模态去雾方法,通过四向偏振图像获取融合强度与偏振散射信息,结合增强暗通道先验与自适应直方图均衡化分别处理各偏振图像,再经小波融合提取斯托克斯参数计算偏振度(DoLP),最终通过拉普拉斯金字塔融合实现细节增强与天空过曝抑制。实验表明该方法在雾天图像清晰度、色彩保真度及细节保留方面显著优于单模态方法。

  
孙彤|马淼|程瑶玉|李一豪|翟新月|牛阳凯静
中国北方信息与通信工程学院,太原 030051

摘要

本文提出了一种双模态偏振去雾方法,该方法结合了图像强度和线偏振度(DoLP)来提高雾天和朦胧条件下的图像清晰度。使用专用CMOS相机在四个偏振角度(0°、45°、90°和135°)拍摄图像。每张图像分别经过暗通道先验(DCP)和对比度限制自适应直方图均衡(CLAHE)的去雾处理,然后通过HAAR小波融合算法将处理结果合并。从融合后的偏振图像中计算斯托克斯矢量(S?、S?、S?),并从中得出线偏振度(DoLP)。最后,将去雾后的S?图像和DoLP图像融合,生成最终的高质量去雾图像。实验结果表明,该方法在各种具有挑战性的天气条件下显著优于传统的去雾技术,提高了视觉清晰度和颜色准确性,同时有效解决了天空区域过度曝光的问题。

引言

在自然场景中,雾、霾或空气质量差等天气条件会显著降低成像质量。大气中的悬浮水蒸气和尘埃颗粒会散射和吸收光线,从而降低能见度、对比度和颜色保真度[1,2]。这种退化严重影响了基于计算机视觉的应用,包括安全监控、智能交通系统和物体识别[3,4]。因此,迫切需要图像去雾技术来提高图像质量并确保这些应用的可靠性。
近年来,图像去雾技术得到了广泛研究。传统方法依赖于图像增强技术,如Retinex[5]、小波变换[6]和同态滤波[7],这些技术通过调整亮度和对比度来改善图像质量。然而,这些方法往往忽略了雾和霾的物理效应,限制了其在复杂环境中的效果[8]。相比之下,基于大气传输模型的方法,如何等人提出的暗通道先验(DCP)[9],利用了光散射和吸收的物理原理[10]。DCP因其简单性和有效性而受到欢迎,它利用了无雾图像中非天空区域的暗通道值接近零的特性来估计大气光和传输[11]。尽管DCP有这些优点,但由于传输估计不准确和细节丢失的问题,在实际应用中仍存在局限性[12]。最近,基于深度学习的方法(如卷积神经网络CNN)通过从雾天和无雾图像对中学习特征来提升去雾效果,但这些方法仍依赖于训练数据的质量[13]。
同时,工业区或有色金属加工区常见的烟雾和煤烟等大气污染物引起的噪声和模糊问题也通过各种恢复方法得到了解决。早期技术采用直方图均衡(HE)及其变体来增强对比度,但往往会导致噪声放大或边缘平滑。基于小波的方法因能够在不同频段分离噪声和雾霾成分而受到关注,从而更有效地保留细节。后续改进采用了第二代小波和融合策略来提高传输估计并减少伪影。深度学习方法,特别是使用GAN和对比学习的方法,在处理动态烟雾和复杂退化方面显示出潜力,但它们对大量标记数据和计算资源的依赖仍然是实时工业应用的障碍。
当前的去雾方法面临几个挑战。深度学习方法虽然强大,但在深度较大或雾层密集的场景中由于依赖训练数据集,常常会产生伪影和颜色失真[14,15]。同样,基于偏振的方法利用光的偏振特性来去除雾霾[16],在某些情况下表现良好,但在线偏振度(DoLP)较高的场景(如金属结构或水面)中效果不佳[17]。在这些高DoLP区域,传统偏振方法的假设不再成立,导致信息丢失和颜色失真[18,19]。这些限制凸显了对更强大和多功能去雾技术的需求。
为了解决这些问题,我们提出了一个双模态去雾框架,该框架利用偏振敏感的CMOS传感器在四个偏振角度(0°、45°、90°、135°)捕获的场景强度和偏振信息[20]。本研究的主要贡献如下:首先,我们设计了一种考虑偏振的预处理和去雾方法,其中每个偏振图像分别通过改进的暗通道先验[21,22]和CLAHE进行恢复。然后使用Haar小波变换融合恢复的图像,以同时保持局部对比度[23]。其次,我们从融合的偏振数据中重建斯托克斯参数(S?、S?、S?),并计算线偏振度(DoLP),以明确编码散射引起的偏振效应,从而获得物理上可解释的表示,补充了强度恢复[24,25]。最后,我们引入了一种基于拉普拉斯金字塔的双模态融合方案,使用考虑偏振的权重将去雾后的S?图像与DoLP图像融合[[26], [27], [28]],增强了边缘清晰度并抑制了天空区域的过度曝光。在从Bayer原始数据获取的真实世界雾景场景上进行的全面实验中,将图像解码为1224 × 1224、24位BMP格式后,结果显示在可见度、细节保留和颜色保真度方面均优于传统的单模态图像[[29], [30], [31], [32]]。

方法概述

提出的方法

本文提出了一种基于强度和偏振的双模态融合去雾方法,其详细架构如图1所示。首先获取0°、45°、90°、135°四个Bayer格式的偏振图像,并将其解码为RGB图像。然后分别对每个RGB图像使用改进的DCP和CLAHE进行增强,最后通过HAAR小波融合合并各角度的结果。

图像采集

为了确保存在雾天以及多角度偏振信息的可用性,本研究中使用的原始图像是使用我们自己的相机拍摄的Bayer格式原始图像。图像采集的现场照片如图4(a)所示。具体来说,使用了TRI050S1-QC偏振相机进行数据收集。该相机配备了Sony IMX264MYR彩色CMOS传感器,该传感器具有片上线栅偏振器,能够捕获四个不同方向的偏振图像

结果与讨论

本节通过多维度验证框架系统地评估了所提方法的有效性,该框架结合了主观图像细节分析和客观评估指标。首先,评估了去雾过程在提高模糊图像清晰度方面的能力,以及它整合暗通道先验(DCP)和对比度限制自适应直方图均衡(CLAHE)互补优势的能力。

结论

总之,本研究提出了一种基于强度和偏振的双模态融合方法。该方法基于DCP和CLAHE进行去雾增强。实验结果表明,去雾后的图像在主观视觉评估和客观指标评估方面均优于DCP和CLAHE。此外,通过将DoLP信息引入强度图像并将其融合到最终结果中,该方法能够揭示更多物体细节。

资助

本研究得到了国家自然科学基金(62305237)和山西省研究生实践创新项目(2024KY606)的支持。

CRediT作者贡献声明

孙彤:撰写——原始草案、软件开发、方法论、形式分析。马淼:方法论。程瑶玉:监督、资源提供。李一豪:撰写——审稿与编辑。翟新月:数据调查。牛阳凯静:验证。

利益冲突声明

作者声明他们没有已知的财务利益或个人关系可能影响本文的研究结果。
相关新闻
生物通微信公众号
微信
新浪微博
  • 急聘职位
  • 高薪职位

知名企业招聘

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号