远距离多源图像融合系统实时配准设计

为了实现全天候多波段远距离实时图像监控,设计了具有微光、红外和可见光融合的光学前端,对多源图像进行实时配准研究。在平行光轴的基础上,通过计算不同视场图像的成像视差,计算仿射变换需要的参数,采用双线性内插算法弥补红外在成像方面与可见光图像的差别,将红外图像的变换制作成查找表存储在图像处理器DM642中,系统通过硬件查找表可以快速实现不同图像的配准变换,实现同步视频的实时配准与融合。实验表明:该设计能够准确地实现多源图像的实时配准,系统经过图像配准、图像融合和伪彩变换处理后的时间约为24.3 ms,系统探测距离大于3 km。     

基于图像融合的动态轮廓线跟踪新方法

红外与可见光传感器是目标跟踪识别系统中常用的两种传感器,对这两种传感器图像进行融合能有效提高系统跟踪检测的准确性。将动态轮廓线模型与图像融合结合,在特征搜索过程中利用特征点准确地完成了图像配准,同时使用了一种新的特征级融合方法,将两种图像中目标轮廓的B样条曲线控制点进行实时微分耦合。这种耦合将Curwen提出的微分耦合机制作了改进,利用图像配准把刚性硬模板改变为实时的变换模板并推导了融合后动态轮廓线的新的动力学方程。这种融合利用了红外图像目标轮廓信息约束可见光图像中动态轮廓线的收敛形状,有效地提高了可见光图像目标跟踪的准确性。对运动人手序列图像的对比跟踪实验表明,这种融合使得可见光图像中动态轮廓线平均跟踪误差减小了60．25％。     

彩色融合技术在军事中的应用

采用基于l空间的色彩传递理论实现实时的红外与可见光彩色融合技术,并介绍了自行研制的红外与微光彩色融合系统的组成和工作流程。介绍了彩色融合技术在军事中的典型应用:夜间狙击手探测和伪装车辆探测,并给出了实验图像。设计了一种图像中目标探测性的主观评价方法,并对两组实验图像进行了评价。实验结果表明,彩色融合技术能够大大提高军事目标的探测性。     

基于UV光谱技术的高压电晕放电检测

通过分析高压电晕放电的光谱特性，提出应用紫外光+可见光的双光谱实时视频图像处理系统来探测高压电晕放电.该双光谱系统以高性能数字信号处理器TMS320DM642为核心，为了采集紫外信号而设计了光路、光谱转换和图像增强等技术,同时采用多种优化设计的硬件结构、快速融合算法及管理多进程的嵌入式实时操作系统DSP/BIOS，实现具备手动像素平移配准功能的双通道数字图像的实时融合处理.系统可以实时检测和定位高压电晕放电紫外信号，且具有响应速度快、作用距离远、不受日光和雨雾的干扰等优点.     

基于亮度对比度传递的红外与可见光图像融合方法研究

基于亮度一对比度传递技术提出了一种红外和彩色可见光图像的融合方法,该算法通过对红外图像和可见光图像在HIS空间进行二次融合,保留了可见光图像的颜色特性,并获得一幅具有良好亮度和对比度效果的融合图像。实验结果表明该方法融合噪声小、细节缺失少、融合速度快。     

一种多重图像融合系统的电配准技术

在多光谱实时图像融合实验系统的基础上,提出一种实现图像融合系统中非共轴光学系统微小量配准的电子学方法,讨论了配准原理、所采用的技术方案及系统实现的技术途径。在机械粗配准之后,系统可快速实现系统微小量的配准功能     

单光子探测三维点云与可见光图像融合处理算法研究

为了提升光电系统对于目标的探测识别能力,实现单光子探测三维点云数据和二维可见光图像的融合处理,提出了单光子探测成像系统的融合处理算法,采用直接线性变换方法并利用同名特征点的选取和间接平差算法解决了融合处理过程中的参数标定问题。通过实验数据进行融合处理算法验证,实现了分辨率1024×768像素单光子探测三维点云和二维可见光图像的像素级融合处理。实验结果表明,提出的融合处理算法能够有效实现三维、二维图像的融合。     

高分辨大视场紫外-可见光偏振成像融合处理技术

采用蒙特卡罗方法对水云下大气的偏振态分布进行了仿真分析,所建立的水云大气环境在紫外360～400 nm波段的偏振度响应最大。采用紫外-可见光偏振成像技术对同一视场下的楼房、云和天空进行了偏振成像实验,并用霍夫变换分割方法对图像中的每个区域进行了统计分析,发现观测区域内无云区与云区的偏振角均值相对差为1.6%,偏振度均值相对差为-14%,证明了大气偏振角较偏振度稳健。紫外光和可见光在对云目标的偏振观测中存在互补性,采用拉普拉斯金字塔图像融合技术能够提高对大气目标的探测能力,验证了大视场高分辨紫外-可见光偏振成像技术在大气探测中的可行性和有效性。     

近自然彩色图像融合算法及其实时处理系统的发展

在军事和生产领域,特别是在极其恶劣的可视条件下,图像融合技术越来越强调融合效果显示的"近自然"感觉,以及人类视觉感知的要求。从彩色图像融合算法的发展概况出发,着重介绍了两种具有代表性的基于视觉特性的近自然彩色图像融合方法,并特别阐述了课题组近期开展的相关算法研究成果。总结了国内外实时彩色图像融合系统的发展现状,概括了课题组已具备的硬件实验基础,综合分析了实时彩色图像融合技术的若干关键技术,如多源图像特征分析、实时图像配准、融合图像后处理等。针对实时图像融合技术的应用状况,提出图像融合系统未来的发展趋势。     

基于双路级联对抗机制的红外与可见光图像融合方法

针对现有的基于生成对抗网络的图像融合方法存在忽略红外图像的热目标信息,可见光图像的部分细节信息丢失的情况,提出一种基于双路级联对抗机制的红外与可见光图像融合方法。首先,在生成器模型中采用双路级联的方式分别对红外与可见光图像进行特征提取,为提高融合质量在内容损失函数中引入结构相似度。然后,在判别器模型中采用双判别方式判别生成图像的真假。最后,在公开的数据集上进行实验并与8种经典先进的图像融合方法进行比较。实验结果表明:融合图像在保留红外图像的目标信息同时也保留了可见光图像更多的细节信息,在主观评价和客观评估上均获得较好的性能。     

自适应参考图像的可见光与热红外彩色图像融合算法

可见光与红外热图像的彩色图像融合技术是现今国内外高性能夜视技术发展的重要方向之一,该技术有效提高了人们对目标的探测和场景理解能力。目前常用的色彩传递算法多属于基于单幅参考图像的全局色彩传递算法,彩色融合图像的色调受到参考图像的影响较大,在实际应用中难以保证对各类场景的适应性。针对常规YUV空间色彩传递彩色图像融合算法的环境适应性问题,通过对植物、城镇和海天三类典型场景的分类与统计,发现了典型场景在UV通道的均值和标准差具有的较为明显的分类特性,由此提出了一种基于UV通道均值和标准差的自适应参考图像构造方法,使得可见光与热红外彩色图像融合算法具有较常规算法更好的环境适应性,融合图像的色彩具有较好的自然感,且算法处理量较小,对现有实时硬件融合处理算法的运算速度影响不大,是一种环境适应性强的自然感彩色融合处理算法。     

基于网络传输的实时图像融合系统设计

 为了实现图像融合系统远距离实时传输,提出一种基于TI公司TMS320DM642和TMS320DM365处理器平台的高速网络传输图像融合系统的设计方案。设计基于TMS320DM642融合模块和基于TMS320DM365网络传输模块,解决了图像融合模块和网络传输模块间的数据通信问题;在融合模块中实现图像配准和图像实时融合,融合图像数据在网络传输模块中进行H-264算法压缩并根据RTP(real-time transport protocol,实时传输协议)协议实现RTP封包处理,传输码率约为460 kb/s;利用线程间管道通信技术,实现了一种新的基于RTP/RTSP(real time streaming protocol,实时流传输协议)嵌入式流媒体服务器的搭建方法。实验结果表明：系统总体图像延迟为300 ms左右。     

一种双通道夜视图像彩色融合系统

提出了一种双通道夜视图像的彩色融合系统。利用Matrox Meteor-Ⅱ多通道图像采集卡获取双通道微光与红外视频图像．通过仿MIT,BIT．TNO．线性组合和混合结构等图像融合结构实现微光／微光和微光／红外图像的彩色融合处理。系统彩色图像融合处理是在VC++6．0环境下运用采集卡图像函数库实现的。建立的实验平台为彩色夜视融合算法的评价和进一步的研究奠定了基础。     

基于图像融合的视频监控系统设计

目前的信息监测和预警系统通常采用可见光摄像机、微光电视和热像仪中的一种探测器单独工作或切换工作,针对３种探测器存在不同的探测死区,单独使用不能克服各自的缺点, 无法完整体现信息监测的需求问题,设计了集这３种探测器于一体的图像融合监控系统。通过分析这３种具有互补性的探测器各自成像机理及特点,给出了系统的总体组成。基于融合图像监控系统的工作原理,设计出前端探测系统的主要结构,使摄像转台能实现＋９０至－３０的俯仰和１７５方位旋转,平行光轴的设计和调校使各光轴夹角不大于０．５ ｍｒａｄ;通过加权平均融合和配准技术对系统进行图像融合试验,图像质量以及系统实时性测试表明:基于图像融合的视频监控系统能实现全天侯的信息监测。     

红外和彩色可见光图像亮度-对比度传递融合算法

以红外和彩色可见光图像为研究对象,提出了一种基于亮度-对比度传递（LCT）技术的彩色图像融合算法。首先借助灰度融合方法将红外图像与彩色可见光图像亮度分量融合,然后用LCT技术改善灰度融合结果的亮度和对比度,最后利用快速YCBCR变换融合策略在RGB空间内直接生成彩色融合图像。文中利用像素平均融合法和多分辨率融合法作为不同的灰度融合措施以分别满足高实时性和高融合质量的需求。实验结果表明,提出算法的融合结果不仅具有与输入彩色可见光图像相近的自然色彩,而且具备令人满意的亮度和对比度,即使采用运算简单的像素平均法进行灰度融合,同样可以获得良好的融合效果。     

基于FPGA的亚像元图像融合系统的设计与实现

研究并设计了基于FPGA的亚像元图像融合系统，该系统能够在接收到亚像元相机输出的两路CCD图像信号后，实时地将其融合并显示．搭建了亚像元图像融合实验平台，介绍了系统的组成以及主要电路的实现方法，并进行了实验验证．结果表明，图像融合效果好，设计方案可行．     

DMA在高速红外图像实时处理系统中的应用

针对某红外成像定位系统对红外序列图像处理和诸如图像去噪、非均匀性校正、图像自适应分割、图像测量、数模解算等算法的实时性能要求，提出采用DSP DMA（存储器直接访问）方式处理系统中的转移和大量交换高效方案。以AD21062和EP1C6组成的数字图像处理系统为例，介绍DMA操作在高速红外实时图像处理系统中的应用，并给出具体的设计。实验表明，该设计方案可以使DSP从大量的数据搬移操作中解脱出来，专门的图像处理算法操作能够有效地提高数字图像处理系统的实时性，解决了系统的瓶颈问题。