摘要

本发明公开了一种基于差分指导表示学习网络的骨骼动作识别方法,步骤如下:获取骨骼动作序列;计算骨骼动作序列的差分值得到差分序列;将差分序列输入差分信息模块,由长短期记忆网络得到差分特征表示;将骨骼动作序列和差分特征表示输入原始信息模块,使用差分特征表示来指导骨骼动作序列的表示学习,得到原始序列特征表示;拼接差分特征表示和原始序列特征表示,由多尺度卷积神经网络提取多尺度特征,使用最大池化操作得到池化表示;将池化表示输入全连接层进行分类。本发明使用长短期记忆网络来建模骨骼动作序列的差分信息以指导骨骼动作序列的表示学习,使用多尺度卷积神经网络提取骨骼动作序列的多尺度特征,提高了骨骼动作识别的准确率。