空间注意力与位置优化的三维人体姿态估计域适应算法

作者：姜友鹏; 华阳; 宋晓宁^*

来源：计算机科学与探索, 2023, 1-13.

• 三维人体姿态估计
• 无监督域适应
• 生成对抗网络
• 注意力机制

现有三维人体姿态估计器在单个数据集上表现较好，但受限于训练数据姿态结构的单一，其在跨域实验上的泛化性不足。现有方法通过增加姿态多样性来弥补该缺陷，然而这些方法生成的新姿态缺乏真实有效性且姿态全局位置的分布与目标数据集仍存在显著差距。针对上述问题，提出一种基于生成对抗网络（generative adversarial network， GAN）的空间注意力与全局位置优化的三维人体姿态估计域适应算法。算法引入空间节点注意力模块约束生成器产生更自然的人体姿态，并结合姿态位置修正模块促使生成姿态向目标数据域对齐，从而解决以上域适应问题。此外，为了提升估计器训练的稳定性，提出一种端到端随机混合的训练策略，使姿态估计器可兼顾新旧数据信息的学习。作为一种生成式的域适应方法，本算法可以高效地应用于各种二阶段三维人体姿态估计器。通过跨场景实验与跨数据集实验，结果表明所提算法在多个基准数据集上的表现均达到当前最佳。其中在3DHP数据集中，本方法MPJPE与AUC指标相比最优工作优化了1.7%和1.4%，验证了所提算法可有效提高三维人体姿态估计器的泛化性。

• 单位
  江南大学