近红外与可见光双通道传感器信息融合的去雾技术

为了对雾霾天气下的图像进行去雾处理，多幅图像去雾算法是常用的方法之一。多幅图像去雾算法也有多种形式，部分算法面临硬件实现困难、获取途径受限或者可实施性弱等问题，而且多幅图像比对处理时常常涉及图像配准，造成算法的实时性差、计算复杂度高等问题。针对以上问题，提出的算法为多幅图像去雾提供了新的思路，基于双目传感器硬件架构能够同时捕获近红外和可见光图像，将近红外传感器图像作为新的数据源，近红外传感器能够在一定程度上穿透雾霾，在雾天捕获可见光传感器无法捕获的图像细节，而且硬件实现简单。可见光图像的颜色信息较丰富，近红外传感器图像对近处场景细节的描述能力较好，捕获的图像稍加校正就能实现完全配准，将近红外图像与可见光图像进行融合，在去雾的同时，可以将近红外传感器图像中的原始细节提取融合到彩色可见光传感器图像中，得到边缘、轮廓等细节信息更加丰富的去雾图像。基于上述思路，借助近红外传感器对边缘细节的描述能力和可见光传感器对颜色信息的反映能力，提出了一种基于近红外与可见光双通道传感器图像融合的去雾算法。首先，将彩色可见光图像转换到HIS彩色空间，分别得到亮度通道图像、色调通道图像和饱和度通道图像。先将其亮度通道图与近红外图像进行融合去雾处理。采用非下采样Shearlet变换（NSST）进行分解，对得到的高频系数进行双指数边缘平滑滤波器保边滤波处理，对低频系数进行反锐化掩蔽处理，通过融合规则和反向变换得到新的亮度通道图像。然后，在对可见光图像的色彩处理中，建立饱和度图的退化模型，采用暗原色原理对参数进行估计，得到估计的饱和度图。最后，将新的亮度通道图像，估计的饱和度图像和原色调图像反映射到RGB空间得到去雾图像。为了验证新算法的有效性，特选取四组雾天拍摄的真实近红外图像与可见光图像进行融合去雾处理，将融合结果与其他两种去雾方法对于彩色可见光图像的去雾效果进行比较。实验结果表明，该算法在提高图像的边缘对比度和视觉清晰度上有较好的效果。并提出将近红外传感器图像作为新的数据源，采用双通道图像融合方法进行去雾处理，为图像去雾提供的新的技术思路是可行的。该算法的优势在于：首先提出将图像融合方法与去雾算法相结合，得到了新的去雾算法的思路。将彩色可见光图像转换到HSI色彩空间，将其亮度通道图与近红外图像采用非下采样Shearlet变换方法进行融合处理，在去雾的同时，可以将近红外传感器图像中的原始细节提取融合到彩色可见光传感器图像中，使得去雾图像中的边缘、轮廓等细节信息更加丰富。其次，提出了在图像去雾算法中采用新的数据源--近红外传感器图像，从图像处理的角度，近红外传感器能够在一定程度上穿透雾霾，对于近处场景细节的描述能力较好，而且硬件实现简单，捕获的图像稍加校正就能实现完全配准，为后续的融合去雾算法带来了便利，为图像去雾提供了新的技术途径和路线。再次，采用的是多幅图像去雾算法，该算法基于双目传感器获取图像，可见光图像的颜色信息较丰富，近红外图像对于近处场景细节的描述能力较好，相对于单幅图像去雾算法，有更好的效果。最后，将可见光传感器图像映射到其他色彩空间，对于每个通道的图像根据其特征有针对性地进行处理。可见光图像的亮度通道图和近红外图像的处理采用了图像融合和增强处理，对于可见光图像饱和度通道的处理采用了图像复原算法，可以从整体上提升去雾效果，对细节特征有了进一步增强。该算法为图像去雾提供了新的技术途径和路线。

A Dehaze Algorithm Based on Near-Infrared and Visible Dual Channel Sensor Information Fusion