一种跨模态光学信息交互和模板动态更新的RGBT目标跟踪方法 |
| |
引用本文: | 陈建明,李定鲣,曾祥津,任振波,邸江磊,秦玉文.一种跨模态光学信息交互和模板动态更新的RGBT目标跟踪方法[J].光学学报,2024(7):109-123. |
| |
作者姓名: | 陈建明 李定鲣 曾祥津 任振波 邸江磊 秦玉文 |
| |
作者单位: | 1. 通感融合光子技术教育部重点实验室,广东省信息光子技术重点实验室,广东工业大学信息工程学院,先进光子技术研究院;2. 南方海洋科学与工程广东省实验室(珠海);3. 光场调控与信息感知工业和信息化部重点实验室,陕西省信息光子技术重点实验室,西北工业大学物理科学与技术学院 |
| |
基金项目: | 国家自然科学基金(62075183,62275218);;中央高校基本科研业务费专项资金(D5000230117); |
| |
摘 要: | 提出一种跨模态光学信息交互和模板动态更新的可见光和热红外(RGBT)跟踪方法,选取能够在跟踪速度和精度上取得平衡的Siamese跟踪器作为基本框架,并设计特征交互模块以重构不同模态的信息比例和增强模态间信息交流。在此基础上,基于无锚框的思想构建预测网络,以提升跟踪器的灵活性和通用性,同时提出一种模板动态更新的策略,通过动态更新跟踪模板增强模型对变化目标的适应能力。在GTOT等3个基准数据集上的对比实验表明,所提方法可显著提升跟踪器在复杂环境下的目标跟踪性能。
|
关 键 词: | 机器视觉 计算机视觉 目标跟踪 孪生网络 模板更新 |
|
|