时空卷积孪生匹配网络目标跟踪方法、装置、介质及设备

作者：陈汉造; 邢晓芬; 徐向民; 郭锴凌

来源：2020-03-11, 中国, ZL202010166240.4.

本发明提供了一种时空卷积孪生匹配网络目标跟踪方法、装置、介质及设备；其中方法包括如下步骤：预处理训练数据；训练卷积神经网络模型；分别提取目标跟踪视频的第一帧图像、搜索帧图像以及搜索帧前T帧图像的特征；将第一帧图像的特征和搜索帧图像的特征进行互相关操作,得到第一互相关响应图R1；采用三维卷积方式对搜索帧前T帧图像的特征进行融合生成注意力响应图；将注意力响应图和第一帧图像的特征相乘,得到新的模板帧特征；将新的模板帧特征和搜索帧的特征进行互相关操作,得到第二互相关响应图R2；将R1和R2中APCE系数较大的一项作为最新跟踪对象。本发明能够适应目标的变形和遮挡；在不影响速度的情况下有效提高跟踪精度。

• 单位
  华南理工大学