一种基于CAVE的交互式全景视频显示方法

为了实现全景视频的沉浸式显示,开发了一个基于CAVE的交互式全景视频显示系统.本系统成功地实现了pgr全景视频文件在CAVE上的播放.首先,将全景视频中的每一帧全景图像映射到一个虚拟球面上;其次,使用五个虚拟相机对该球面的四面及顶面进行拍摄,调整各相机的参数使所得各幅图像覆盖整个球面区域,并能够无缝拼接;最后,将所得五幅图像分别投影到CAVE系统中各投影幕中;另外,实现通过鼠标、手柄等输入设备调整CAVE中各投影幕的画面.     

智慧家庭的VR全景视频业务实现

全景视频作为一种新的视频格式极大程度地改变了用户观看视频的方式,可以提升智慧家庭在视频领域的用户体验。IPTV良好的解码能力以及优异的网络支撑等优势对全景视频的应用推广具有积极作用。结合VR全景视频的特点,分析了超高分辨率全景视频在IPTV平台中的技术挑战,同时基于FOV视点自适应框架,结合MCTS编码、多分辨率和多tile视频分发和终端根据视点部分解码tile技术,给出一种IPTV超高分辨率全景业务实现方案。     

全景视频拍摄及视频编辑应用浅析

尽管全景视频的拍摄技术早已出现,但并没有受到过多的关注.近些年随着新媒体和短视频的不断发展,全景视频才开始得到重视,全景视频的拍摄技术也在不断成熟.在现代科学技术不断发展的背景下,全景视频逐渐被应用到娱乐、旅游、医疗等多个行业和领域.为此,以全景视频为主要研究对象,对全景视频拍摄及视频的编辑应用进行研究和分析.     

一种360°全景视频自适应FEC编码算法研究

针对全景视频数据因量大和延时敏感的特点造成的视频失真问题,提出一种360°全景视频自适应前向纠错（Forward Error Correction,FEC）编码算法,根据实时网络状况对全景视频的图块进行编码比特率和FEC编码率的优化匹配,将全景视频传输质量最大化,减少视频失真。实验结果证明,与传统视频传输算法相比,该算法可以减少视频失真,且视频峰值信噪比（Peak Signal to Noise Ratio,PSNR）提高5～7 dB。     

视频编码的技术基础及发展方向

现有视频编码采用基于块的混合编码架构,利用预测、变换、量化和熵编码技术实现对视频信号的高效压缩.在现有架构基础上进一步优化,提供针对视频图像信号局部特性的更加灵活的处理和编码.基于机器学习的视频编码技术有望部分或全面地改变现有的混合编码框架,给视频编码带来新的研究思路.未来视频除了现有的二维平面视频,还需要编码面向AR/VR应用的球面视频数据和体视频数据,这些新的视频源数据格式也给视频编码技术研究带来新的机会和挑战.     

全景视频视口预测方法综述

全景视频技术随着元宇宙概念走向现实愈发受到重视,然而其庞大的数据量成为该技术普及的瓶颈.对此,首先介绍全景视频视口预测在传输中的意义,其次对当下现有的视口预测方法进行介绍和总结,最后对视口预测技术的发展方向进行展望,旨在进一步提高视口预测的可靠性,从而降低传输带宽需求,提高用户观看体验.     

VR全景视频时空切片传输的流量评估与建模

为了刻画虚拟现实（VR）全景视频的传输流量需求,针对时空切片传输模式,首先,基于VR全景视频观看数据集,对传输流量评估与空间切块方式和时间分段方式之间的关系进行仿真。然后,基于仿真结果,对VR全景视频的传输流量进行统计建模,建立传输流量与空间切块数量和时间分段长度之间的函数关系。最后,基于得到的传输流量模型,提出一种VR全景视频时空切片方式的嵌套优化方法,其外层对空间切块数量进行遍历寻优,内层直接计算最优的时间分段长度。研究和仿真结果表明,传输流量近似服从正态分布,其均值和方差与时空切片方式有关;通过对不同类型的视频分别进行传输流量统计建模,基于所建立的流量模型优化得到的时空切片方式与通过仿真搜索得到的最优切片方式性能接近。     

全景电视摄像技术的研究

本文提出一种利用扫描变换技术实现的水平视场角为１８０°的全景电视摄像技术，利用该技术在普通的电视监视器上可同时观测被摄景物展开的３６０°空间图像。     

复杂机场全景视频拼缝优化方法研究

全景视频是未来复杂机场可视化管控的重要手段.面向复杂机场大视场全景视频的特殊场景,针对全景拼接存在的移动目标(飞机、特种车辆等)过缝产生的鬼影问题进行分析,提出一种大视场全景视频拼缝优化方法.该方法根据相邻视频图像的重叠情况、色彩差异等因素寻找最佳缝合线,并对机场全景视频中的运动目标(飞机、特种车辆等)过缝产生鬼影问题进行优化处理.实验结果表明,该方法可以有效优化复杂机场全景视频中的拼缝并对各类飞机、特种车辆等运动物体产生的鬼影进行抑制.     

基于灰度投影和块匹配的无人机视频稳像方法

全局运动估计是电子稳像的关键技术之一。针对视频大抖动情况下的传统估计方法慢和不准确的问题,提出了一种灰度投影和块匹配相结合的平移运动估计,与基于图像极坐标变换的旋转缩放运动估计方法结合,形成了完整的全局运动估计新方法。使用卡尔曼滤波和视频图像重构,输出新视频。通过对大量视频处理,结果表明该方案提高了全局运动估计方法的运算速度和估计精度,产生了稳定的视频输出。     

全景视频QoE评价研究进展

随着5G移动通信技术、高性能计算、传感技术的不断进步,全景视频受到了越来越多的关注。全景视频通过头戴显示设备,可以为用户提供远超于平面视频的逼真的立体视觉感知,具有良好的发展前景。为用户提供良好的体验质量(Quality of Experience,QoE)是视频服务提供商吸引和留住用户,在激烈的市场竞争中取得成功的关键。与平面视频相比,全景视频的数据量倍增,对视频数据的采集、编码、传输和存储均提出了更高的要求。因此,如何在网络传输带宽、存储资源有限的情况下,保证用户的QoE就成为工业界和学术界共同关注的研究热点问题。本文对全景视频QoE评价进行了综述,首先对全景视频在采集、拼接、投影、编码、传输、解码、反投影、渲染等各个环节可能存在的失真进行分析,总结归纳了用户QoE的各种影响因素,如人的因素、系统因素、情境上下文和视频内容特性等;在此基础上,从影响因素和建模方法等多个方面归纳了全景视频QoE评价模型的研究进展,及其在码率自适应、资源优化分配和码率控制等方面的应用情况;最后,介绍了具有代表性的全景视频QoE评价数据集以及常见的QoE模型性能评价准则,并探讨了QoE评价模型目前存在的问...     

多标准视频硬件解码器的存储器地址映射方法

提出了一种支持多标准视频的存储器地址映射方法,用一个简洁的公式把视频图像映射到DDR SDRAM的存储空间.该方法兼顾运动补偿模块、去块效应滤波模块(或重建模块)和显示模块的不同需求特点,通过充分减少DDR SDRAM非读写命令的额外延时,达到较高的存储器接口效率.     

FPGA平台的实时全景视频系统设计

本文提出并实现了一种基于FPGA的全景视频处理系统设计方案。该系统采用Xilinx Spartan-6 FPGA全硬件单片方式实现,包括5个摄像头的图像采集、图像预处理、图像校正、全景拼接、视频压缩、以太网传输、HDMI显示等模块,达到了360度全景视频高质量、高分辨率、实时性的要求。     

基于垂直投影直方图的视频中人体前景提取方法

在视频流中,当两人或者更多人在一起行走且距离很近时,我们采用常用的方法得到前景目标,提取特征时,往往会将相连的多人检测为同一个前景.为了解决这一问题,本文以提取前景目标中相连两人为研究对象,阐述了一种基于垂直投影直方图的人体前景提取方法.按照本文的判别规则,如果检测出为两人,则重新划分每个人体的前景区域,并且用矩形框进行标记.实验结果表明,该方法可以有效地将相连在一起的前景目标分割出来.     

一种全景式5G网络质量评估方法

目前5G网络建设已经初具规模,5G网络商用已经全面开放,5G网络用户和业务规模正在呈阶梯状增长,但是5G网络全面和客观的质量评估方法和标准尚未明确,因此本文对5G网络评估进行了初步探索,通过挖掘网络问题、收集用户诉求和在网体验感知,总结5G网络评估关键因素和涵盖范围,并初步构建了一种5G全景图作为评估模型,对现阶段5G...     

多镜头反光式全景视频系统的研究

＂多镜头反光式全景视频系统＂旨在讨论一种工程上可行的全景视频系统架构,通过将一组同型镜头在同一水平面上环形对称排列,同时对周围360°内环境进行视频采集,并将采集到的多幅视频图像进行时间同步、色彩融合、统一白平衡、透视变换等处理,从而生成完整的高清晰度全景视频。该系统采用特殊的光路设计,使所有镜头光心重合,从而彻底消除视觉盲区和重影区。讨论一种统一白平衡处理方法,较好地解决了相邻图像帧间存在的色彩差异问题。主要讨论＂多镜头反光式全景视频系统＂的软/硬件系统架构及其相关算法,该软/硬件系统架构及其相关算法已在一台全景摄像机系统样机上实现,能够接近实时地生成环360°的全景视频,表明了该软/硬件系统架构及其相关算法在工程上具有可行性。