摘要
本发明提供了一种联合图像金字塔子网引导和循环交叉注意力的光流计算方法。所述方法包括以下步骤:1)将图像序列连续两帧图像分别输入到图像金字塔子网和特征金字塔子网;2)使用图像金字塔子网对图片进行处理:3)将图像金字塔子网提取到的特征与同层特征金字塔提取到的特征进行相加融合作为下一层特征金字塔的输入;4)在特征金字塔最后三层将融合后的特征输入到循环交叉注意力模块中进行上下文的信息提取。本发明的联合图像金字塔子网引导和循环交叉注意力的光流计算方法,通过浅层信息的补充和对上下文信息的准确提取能力,对图像序列的运动边缘和大位移区域的特征信息进行提取,显著提高光流估计的准确性和鲁棒性。
- 单位