多视点视频编码的研究现状及其展望

阐述了多视点视频编码(MVC)的主要研究问题.其中首先介绍了MVC的体系结构和发展过程;然后详细讨论了MVC的研究内容,包括预测结构、提高MVC编码效率的技术和高层语法;最后在总结MVC研究现状的基础上,提出了MVC在3D视频应用中的研究思路.     

视频自动聚焦的实现研究

提出了用于会议电视摄像机的自动聚焦方法.该方法由聚焦调节和聚焦监测两个过程组成.聚焦调节是寻找聚焦函数最大峰值的过程,在该过程中通过利用超焦距概念和动态自适应变步长搜索算法加快搜索速度,并保证了良好的视觉效果;同时,提出退回检查最大值点变化方法,防止搜索过程中因受到场景变化干扰而导致的聚焦失败.聚焦监测过程是在会议电视通话中,通过监测场景变化使聚焦调节工作适时启动的过程,提出有条件地重新调节聚焦,以始终保障良好的摄像聚焦效果,同时避免频繁调焦.实验结果表明,提出的摄像机自动聚焦方法性能优秀并有良好的顽健性.该方法已经用于华为ViewPoint8020plus视频会议终端的实际产品.     

基于最邻近帧质量增强的视频编码参考帧列表优化算法

帧间预测是视频编码的核心模块,其利用参考帧的重建样本来预测当前图像样本,从而通过传输少量预测残差数据表示复杂视频内容。在有损视频编码中,参考帧质量受到量化失真的影响,导致预测精度较差,影响编码性能。针对低时延视频业务,提出一种基于最邻近帧质量增强的参考帧列表优化算法,通过基于深度学习的卷积神经网络增强与当前帧最邻近参考帧的质量,并将增强后的高质量帧整合到当前帧的参考帧列表中,提高了帧间预测精度。以高效视频编码H.265/HEVC参考软件平台HM16.22为参考基准,所提算法在Y、Cb、Cr这3个分量上可分别节省9.06%、14.92%、13.19%的编码码率。     

基于轻量级全连接网络的H.266/VVC分量间预测

新一代视频编码标准H.266/VVC引入分量间线性模型(CCLM)预测提高压缩效率。针对亮度色度分量存在相关性却难以建模的问题,提出基于神经网络的分量间预测算法。该算法根据待预测像素与参考像素的亮度差遴选出相关性强的参考像素构成参考子集,然后将参考子集送入轻量级全连接网络获得色度预测值。实验结果表明,与H.266/VVC测试模型版本10.0(VTM10.0)相比,所提算法可提高色度预测准确度,在Y、Cb和Cr上可分别节省0.27%、1.54%和1.84%的码率。所提算法具有不同块尺寸和编码参数均可使用统一网络结构的优点。     

嵌入式视频通信系统的实现

介绍了在VIA C3上实现用户级嵌入式视频通信系统,分别从硬件和软件两个方面阐述了该系统的实现原理和算法,着重于解决软件设计中的难点.结合具体应用环境设计了采集/显示模块;根据视频通信的特点设计了内存管理算法,并对视频编解码器进行优化.实验结果表明,在自主开发的嵌入式视频通信平台上,使用所提出的算法可在VIA C3上实现嵌入式视频通信终端,满足实时视频通信的要求,且已应用于实际产品中.     

应用于视频编码的实时多测度联合突变场景切换检测算法

提出一种与视频编码器共用运动搜索模块的实时场景切换检测算法.通过分析原始图像与其运动补偿图像的一阶与二阶差值信号统计特性,分别构造对应于不同场景切换类型的两种测度函数,并联合使用该测度函数检测突变场景切换,同时自适应调节每个测度函数输出值的判决门限.分析和实验结果表明,该算法在视频编码位移估值基础上只增加少量的计算,而对视频序列中的突变场景切换检测的查全率和查准率均优于已有的几种实时检测算法.     

应用于视频编码的实时多测度联合突变场景切换检测算法

提出一种与视频编码器共用运动搜索模块的实时场景切换检测算法.通过分析原始图像与其运动补偿图像的一阶与二阶差值信号统计特性,分别构造对应于不同场景切换类型的两种测度函数,并联合使用该测度函数检测突变场景切换,同时自适应调节每个测度函数输出值的判决门限.分析和实验结果表明,该算法在视频编码位移估值基础上只增加少量的计算,而对视频序列中的突变场景切换检测的查全率和查准率均优于已有的几种实时检测算法.     

基于轻量级全连接网络的H.266/VVC分量间预测

新一代视频编码标准H.266/VVC引入分量间线性模型(CCLM)预测提高压缩效率。针对亮度色度分量存在相关性却难以建模的问题,提出基于神经网络的分量间预测算法。该算法根据待预测像素与参考像素的亮度差遴选出相关性强的参考像素构成参考子集,然后将参考子集送入轻量级全连接网络获得色度预测值。实验结果表明,与H.266/VVC测试模型版本10.0(VTM10.0)相比,所提算法可提高色度预测准确度,在Y、Cb和Cr上可分别节省0.27%、1.54%和1.84%的码率。所提算法具有不同块尺寸和编码参数均可使用统一网络结构的优点。     

视频自动聚焦的实现研究

摘要:     提出了用于会议电视摄像机的自动聚焦方法.该方法由聚焦调节和聚焦监测两个过程组成.聚焦调节是寻找聚焦函数最大峰值的过程,在该过程中通过利用超焦距概念和动态自适应变步长搜索算法加快搜索速度,并保证了良好的视觉效果|同时,提出退回检查最大值点变化方法,防止搜索过程中因受到场景变化干扰而导致的聚焦失败.聚焦监测过程是在会议电视通话中,通过监测场景变化使聚焦调节工作适时启动的过程,提出有条件地重新调节聚焦,以始终保障良好的摄像聚焦效果,同时避免频繁调焦.实验结果表明,提出的摄像机自动聚焦方法性能优秀并有良好的顽健性.该方法已经用于华为ViewPoint 8020plus视频会议终端的实际产品.