基于交互机制卷积双流融合神经网络的视频浓缩

作者：赵春飞; 张丽红

来源：测试技术学报, 2019, 33(03): 228-232.

• 运动目标
• 特征提取
• 交互机制
• 卷积双流融合神经网络
• 视频浓缩

视频浓缩时运动目标之间的相互遮挡和背景的复杂性使得难以准确提取运动目标,导致浓缩比降低.针对此问题,提出了一种基于交互机制的卷积双流融合网络视频浓缩方法.首先,对输入的视频帧进行感兴趣区域选取;然后,卷积双流融合网络分流提取运动目标特征和背景特征并进行特征融合,以减弱运动目标之间相互遮挡的影响;最后,通过交互机制将融合后的特征进行关联性运算,以有效提高运动目标之间及运动目标与背景之间的相关性,再根据相似矩阵进行场景聚类得到关键帧.实验结果表明:通过该网络结构进行视频浓缩,浓缩比和召回率都有所提高.

• 单位
  电子工程学院