平行摄像机阵列移位法获取视差图像的研究

平行摄像机阵列移位法是一种摄像机阵列获取三维场景的视差图像的新方法.该方法在平行摄像机阵列法的基础上,将获取的视差图像进行平移处理,获得了立体显示所需的具有正、负水平视差的视差图像,且这些视差图像没有楔形失真和垂直视差.该方法集中了会聚摄像机阵列法和平行摄像机阵列法两种常规方法各自的优点并摒弃了其缺点.实验证实,所获取的视差图像在光栅式自由立体显示器上得到了三维场景的清晰逼真再现显示效果.     

应用于多视点视频编码的基于深度特征的图像区域分割与区域视差估计

基于多视点视图深度特征,提出一种通过简单块匹配运算划分多视点视图区域并估计区域视差的算法.首先基于深度对象的概念确定图像中具有不同深度的区域数量以及这些区域对应的区域视差,再根据误差最小化准则初步确定每个图像块所属区域.当区域中图像块数量小于某个阈值时,采用区域合并算法将该区域中的每个图像块合并到与它的视差最为接近的其它图像区域,通过迭代形成最终的有效图像区域划分.实验表明,该算法能够以图像块为基本单元有效地划分各深度层区域,并准确估计对应的区域视差.     

一种基于分割的可变权值和视差估计的立体匹配算法

立体匹配一直是计算机视觉研究领域中的热点和难点.是立体视觉中的关键技术之一.为了消除幕于局部图像的双目立体匹配的歧义性,提出一种基于图像分割及可变权值方窠的初始匹配和贪婪的后处理视差估计策略相结合的市体匹配算法.分割彩色立体图像对,利用分割自适应地分配权值来消除匹配特征相似的歧义性.计算匹配代价得到初始视差.接着,为了更好地消除弱纹理区域、重复纹理区域和宽遮挡区域等复杂歧义性,视差后处理中采用贪婪估计方案,包括基于分割的视差校准、窄遮挡处理及多方向自适应加权最小二乘拟合填充.实验结果表明,基于分割的本算法结构简单,能有效地提高处理局外点的稳健性,并生成高精度的稠密视差.     

基于插值算法的立体显示的图像合成与嵌入式实现

在多视点自由立体显示中,针对柱透镜光栅参数与显示器像素不匹配造成的串扰问题,提出利用图像插值的合成方法对图像进行缩放处理。以9视点为例,提出缩放比例系数k,实现双线性插值算法的改进。嵌入式样机测试结果表明,该方法能够满足显示器像素宽度与柱透镜参数的完全匹配,串扰度从13.55%降低到1.40%,降低了12.15%,图像分辨率明显提高,立体显示效果更好。     

新型自动立体显示背光板的光学设计

立体显示技术的研究主要是解决虚拟现实领域的三维视觉问题。自动立体显示是不需要配戴特殊眼镜的,使用一个二维平面空间显示屏显示至少一对满足双眼视差的立体图像。当人的双眼接受到具有视差的立体图像对时,在视网膜上形成视差像,经大脑神经系统的融合,从而产生深度感。提出了一种全新的实现自动立体显示的折射式方法,设计了基于此方法的一种新型折射式的、结构简单的、通过透射显示屏(如液晶显示屏)实现自动立体显示的背光系统。根据视差立体显示参量模型,建立了光学系统的结构参量以及分析了光学材料的性质对实现立体显示的影响,并运用先进的光学设计软件进行设计、模拟。     

一种基于图像融合的无参考立体图像质量评价方法

提出了一种基于图像融合的立体图像质量评价方法。通过对立体图像的左右视图进行图像融合生成一幅彩色图像,融合算法采用主成分分析(PCA),使用归一化互相关(NCC)视差图算法,生成了对应的视差图;对融合图像和视差图分别进行归一化亮度系数和谱能量参数的提取,作为支持向量回归(SVR)的输入数据,在经过充分的训练后对立体图像的质量评分进行预测。在LIVE 3D立体图像数据库上的实验结果表明,提出的算法优于最新的无参考立体图像质量评价方法,与人类的主观评价具有较好的一致性。     

单目多视点立体图像提取及应用

设计并实现了一种基于广角相机和平面镜的单目多视点立体图像摄像系统,给出了硬件装置的设计指标和优化方法;同时,在研究了硬件系统的标定方法基础上,实现了其在三维测距方面的应用。多枚平面镜构成的对称斗型腔体被放置在广角相机前面,物体光线经过不同平面镜反射后,投影到相机图像平面的不同区域,在相机投影平面上生成物体多个影像,形成单目多视点投影图像。该类图像等价于视点不同的多幅图像,可以使用多视点立体视觉算法实现三维测量。     

基于相似度的立体图像对中右视点图像质量评价方法

结合立体视频中左右视点图像序列之间的关系、模糊数学方法以及客观图像质量评价的特点,提出了一种用于立体视频图像中右视点图像进行质量评价的方法.该方法对在解码端通过重建左视点的图像序列对生成右视点图像序列进行基于相似度的图像质量评价.实验结果表明,该方法能较好地反映立体视频右视点图像的质量水平.     

基于视觉显著性的立体显示图像深度调整

基于双目视差的立体显示系统中,不恰当的图像景深分布是引起视疲劳的主要原因,因此提出一种新颖的立体深度调整方法以提高立体显示观看视觉舒适度。该方法以原始立体图像作为输入,应用图像谱残差提取的方法获得立体图像的视觉显著性,结合特定的观看条件建立视疲劳指标模型,获取特定图像在特定观看条件下的最佳零视差平面(ZDP)。根据最佳ZDP对原始输入左右视图进行视差调整,从而获得视疲劳指标最小的立体图像。为了进一步验证该方法对立体显示视觉舒适度的提升效果,设计并完成了相应的视觉感知实验。实验结果表明,该方法显著提高了立体显示观看舒适度。     

一种基于局域边缘特征的自适应立体匹配新算法研究

立体匹配,其目的是在对两幅存在一定视差的图像进行匹配后,获得两幅图像精确的视差图,是计算机视觉领域的重点和难点问题。为了快速、高效地获得高精度的稠密视差图,在充分研究了基于边缘特征的立体匹配和基于局部窗口的立体匹配两类算法的基础上,提出了一种基于局域边缘特征的自适应立体匹配算法。首先该算法自适应地选择局部匹配窗口大小,并计算其中相应位置的权值,实现初次匹配,然后再以基于边缘特征匹配获得的高精度稀疏视差图作为约束,修正部分误匹配点,最终获得准确、稠密的视差图。实验表明,该算法具良好的实验结果和较大的实用价值。     

三目自适应权值立体匹配和视差校准算法

立体匹配是计算机视觉研究中的关键问题.相比于双目视觉,三目视觉能够获得更多的信息和额外的极线约束消除立体匹配的歧义性.为了提高三目立体匹配的精度,提出一种基于自适应权值和视差校准的三日立体匹配方法.将双目视觉中有效的自适应权值窗选择算法应用到三目视觉中,进行匹配窗的选择;提出一种新的目标图像选择算法,能够合理利用平行基线三目立体视觉系统中不同目标图像提供的信息,有效地消除遮挡,提高匹配的精度;提出一种适用于三目视觉的视差校准算法,利用三目图像像素间的色彩相似性和距离约束将初始匹配的视差结果进行校准,得到最终的视差图.实验结果表明,本文算法结构简单,能够生成浓密、高精度的视差图.     

平面三维显示技术的研究现状

平面三维显示技术是近年来最新出现的虚拟现实显示技术,其最大的特点是观察者无需使用任何辅助附加设备,直接用肉眼就可看到屏幕上显示的三维图像。为推进三维显示技术的发展,进一步研究了视差立体成像原理,并据此介绍几种平面三维显示方法及其工作原理,包括障栅立体显示、微柱透镜阵列立体显示、偏振片立体显示和基于微柱透镜立体显示原理的多视点系统,阐述并分析了系统的优缺点。以日本三洋公司的四视角立体显示装置、南京大学的多视点三维显示系统和NEC液晶科技的HDDP三维显示系统为例,描述了国内外该项技术近期的研究现状,分析了存在的技术难点,展望了该应用领域的发展前景。     

自由立体显示器上立体鼠标的实现及其应用研究

提出了一种在三维自由立体显示器的基础上,依据人眼双目视差的原理,使普通鼠标实现立体鼠标显现效果的方法.在此基础上,进一步提出了当立体鼠标指向屏幕上任意点时的实际位置深度信息的计算方法,并通过实验验证了该位置深度信息计算的正确性.理论分析和实验研究表明,提出的立体鼠标实现和位置计算方法可实现将当今的三维自由立体显示器应用于数字摄影测量系统.     

自由立体显示器上立体鼠标的实现及其应用研究

提出了一种在三维自由立体显示器的基础上,依据人眼双目视差的原理,使普通鼠标实现立体鼠标显现效果的方法.在此基础上,进一步提出了当立体鼠标指向屏幕上任意点时的实际位置深度信息的计算方法,并通过实验验证了该位置深度信息计算的正确性.理论分析和实验研究表明,提出的立体鼠标实现和位置计算方法可实现将当今的三维自由立体显示器应用于数字摄影测量系统.     

反射式多路投影立体显示系统的研究

设计了一种反射式多路投影立体显示系统,并介绍了该系统的成像原理及特性。系统将12幅视差图同时投影在柱面栅上,观察者仅凭肉眼就可看到具有双眼视差和运动视差的立体图像。系统成像视域较大,可以同时供多人观看。     

基于角点的红外与可见光图像自动配准方法

针对红外图像与可见光图像的自动配准问题,提出了一种基于图像角点特征以及仿射变换模型的方法.利用Harris因子分别在红外图像和可见光图像上检测角点,并对两幅图像进行边缘检测,得到其边缘图像.通过角点邻域在边缘图像上的相关性,实现角点的粗匹配;通过角点的细匹配,从匹配的角点中选择两对匹配最佳的点作为仿射变换的控制点,得到仿射变换模型,并对待配准图像进行仿射变换,从而实现图像配准.实验结果表明:该方法运算速度快,可以很好地完成红外与可见光图像的自动配准.     

基于多视差函数拟合的集成成像深度提取方法

集成成像系统采用微透镜阵列记录空间场景信息,只有一次成像过程,在获取场景深度时,不存在相机的参数设置和校准问题,简化了深度测量过程,具有很大优势。但是由于该系统采集的元素图像分辨率低,容易受记录噪声影响,元素图像之间匹配困难。基于集成成像系统能够计算重构出多幅视图的优势,充分利用多幅视图提供的冗余信息来改善立体匹配情况。采用颜色相似性的自适应窗口在参考视图与其他视图之间进行立体匹配,得到参考视图与其他视图之间的视差信息,利用视差与视图对之间的抽样距离满足正比函数关系的性质,对多个视差值进行函数拟合,减少了由于记录噪声等因素产生的误匹配,物体深度层次的分辨更加准确。     

基于多视差函数拟合的集成成像深度提取方法EI北大核心CSCD

集成成像系统采用微透镜阵列记录空间场景信息,只有一次成像过程,在获取场景深度时,不存在相机的参数设置和校准问题,简化了深度测量过程,具有很大优势。但是由于该系统采集的元素图像分辨率低,容易受记录噪声影响,元素图像之间匹配困难。基于集成成像系统能够计算重构出多幅视图的优势,充分利用多幅视图提供的冗余信息来改善立体匹配情况。采用颜色相似性的自适应窗口在参考视图与其他视图之间进行立体匹配,得到参考视图与其他视图之间的视差信息,利用视差与视图对之间的抽样距离满足正比函数关系的性质,对多个视差值进行函数拟合,减少了由于记录噪声等因素产生的误匹配,物体深度层次的分辨更加准确。     

基于跨尺度引导图像滤波的稠密立体匹配

针对现有局部立体匹配算法在弱纹理表面、深度不连续处等特定区域匹配精度低、实时性难以满足要求等问题,提出了一种基于跨尺度引导图像滤波的稠密立体匹配算法。利用图像分割技术对立体图像进行预分割,得到分割区域内像素的聚合半径;以此半径为指导,在立体图代价空间中以3种不同尺寸的核进行滤波,引入正则化项确保聚合代价的一致性,以得到更有效的聚合代价;运用简单高效的贪心策略获取初步视差。基于Middlebury测试平台的实验结果表明所提算法兼具实时性和高效性。     

基于引导图像和自适应支持域的立体匹配

提出一种基于引导图像和自适应支持域的局部立体匹配算法。首先对校正后的输入图像进行预处理得到引导图像;在匹配代价计算阶段,提出一种梯度计算方法,结合引导图像和输入图像的梯度信息,分别计算x和y方向的梯度,再与AD(absolute difference)和Census变换融合构建匹配代价计算函数;在代价聚合阶段,使用基于自适应支持域的导向滤波;在视差细化阶段,提出一套基于自适应支持域的多步细化方法,通过该方法得到最终的视差图。实验结果表明,视差细化后全部区域的平均误差和方均根误差平均减少43.7%和38%,非遮挡区域平均减少33.7%和30.9%,所提算法具有较好的鲁棒性并能获得精度较高的视差结果。