基于知识嵌入图卷积网络的双人交互识别方法

作者：谢雪梅; 潘庆哲; 曹玉晗; 李佳楠; 赵至夫; 石光明

来源：2019-10-12, 中国, ZL201910967740.5.

本发明公开了一种基于知识嵌入图卷积网络的双人交互识别方法,主要解决现有技术忽视双人关联而不能提取双人交互特征,以及双人交互识别准确率差的问题。其实现方案为：1)设计知识给定图建立交互双人的骨架点之间的直接连接；2)设计知识学习图,并自适应地建立骨架点之间连接；3)构建可利用不同图之间的互补性的知识嵌入图卷积块；4)将10个知识嵌入图卷积块、一个全局池化层和一个全连接层依次连接构成知识嵌入图卷积网络；5)训练知识嵌入图卷积网络得到最优模型；6)将双人骨架序列输入最优模型识别出双人交互行为。本发明提高了双人交互行为识别的准确率,可用于视频检索,人机交互以及视频理解。

• 单位
  西安电子科技大学