行为关联网络:完整的变化行为建模

作者：何鑫; 许娟; 金莹莹

来源：计算机科学, 2020, (09): 123-128.

DOI：10.11896/jsjkx.190800101

• 行为识别
• 行为关联网络
• 深度学习
• 计算机视觉 Action recognition
• Action-related network
• Deep learning
• Computer vision

针对视频中的完整行为建模,目前常用的方法为时间分段网络(Temporal Segment Network,TSN),但TSN不能充分获取行为的变化信息。为了在时间维度上充分发掘行为的变化信息,文中提出了行为关联网络Action-Related Network(ARN),首先使用BN-Inception网络提取视频中行为的特征,然后将提取到的视频分段特征与Long Short-Term Memory(LSTM)模块输出的特征拼接,最后进行分类。通过以上方法,ARN可以兼顾行为的静态信息和动态信息。实验结果表明,在通用数据集HMDB-51上,ARN的识别准确率为73.33%,比TSN提高了7%;当...

• 单位
  东南大学; 南京航空航天大学