结合多注意力机制的Transformer实时目标跟踪算法

作者：黄易仟; 徐杨^*; 张永丹; 肖慈; 冯明文

来源：计算机工程与应用, 2023, 1-12.

• Exemplar Transformer
• 目标跟踪
• 特征增强
• 外观变化

近年来目标跟踪在学术研究和实际应用中具有巨大潜力，受到越来越多的关注并成为计算机视觉的热点研究方向。针对现有的目标跟踪算法在光照变化、遮挡和快速运动复杂背景条件下跟踪精度较低这一问题，本文提出一种结合多注意力机制的Transformer跟踪算法-TrKYS。首先，引入多注意力模块捕捉目标在空间和通道维度中的特征，实现对目标特征上下文依赖关系的建模；然后，通过多个不同空洞率的平行空洞卷积对特征图进行采样，以获得图像的多尺度特征，增强局部特征表达能力；最后，构建Exemplar Transformer模块，利用模板化的空间信息和目标特征建立了外观跟踪模型。为了适应外观变化，该跟踪算法在连续帧中跟踪目标物体时会实时更新跟踪模板特征向量、运动参数和空间信息，提高跟踪定位的精度。在LaSOT、VOT2018、NFS、OTB-2015、TrackingNet和GOT-10k数据集上实验结果表明，与其他主流目标跟踪算法相比，本文所提算法具有更好的跟踪性能，特别是在TrackingNet上本文的跟踪算法（TrKYS）相对于基准跟踪算法（KYS）成功率提高了3个百分点。

• 单位
  贵州大学; 贵阳铝镁设计研究院有限公司