融合序列影像相关区域信息的光流估计网络 |
| |
引用本文: | 安彤,贾迪,张家宝,蔡鹏.融合序列影像相关区域信息的光流估计网络[J].液晶与显示,2023(10):1434-1444. |
| |
作者姓名: | 安彤 贾迪 张家宝 蔡鹏 |
| |
作者单位: | 1. 辽宁工程技术大学电子与信息工程学院;2. 辽宁工程技术大学电气与控制工程学院 |
| |
基金项目: | 国家自然科学基金(No.61601213);;辽宁省自然科学基金(No.LJ2020FWL004);;中国博士后科学基金(No.2017M61125)~~; |
| |
摘 要: | 针对现有光流估计方法在目标轮廓分割不清晰、缺乏细粒度的问题,本文提出融合序列影像相关区域信息的光流估计网络。通过特征编码器和全局编码器分别提取图像的编码特征和上下文特征,并通过下采样处理缩减特征尺寸。在构建4D相关体前,对输入的连续两帧特征图进行分区处理,以强弱相关的方式计算稠密的视觉相似度,建立更为精细的4D相关体积。在迭代更新阶段,提出残差卷积滤波器和细粒度模块,分别应用于处理相关体和光流传递,使得在融合相关体信息和光流信息前保留更多的局部小位移信息。在KITTI-2015数据集和MPI-Sintel数据集上与其他方法进行对比,光流估计评价指标分别提升了8.2%和6.15%。本文给出的网络模型可以更好地提高光流估计的准确性,有效解决了光流场过于平滑、缺乏细粒度和忽略小物体运动等问题。
|
关 键 词: | 计算机视觉 深度学习 光流 区域匹配 迭代更新 |
|
|