科研之友
微信
新浪微博
Facebook
分享链接
摘要
本发明公开了一种基于局部强化运动历史图和递归卷积神经网络的视频情感识别方法,其步骤包括：1获取静态表情图片数据集和表情视频数据集,并对表情视频数据集进行预处理；2计算局部强化运动历史图LEMHI；3使用静态图片数据集预训练卷积神经网络VGG16模型；4使用LEMHI微调预训练完成的VGG16模型,得到LEMHI-CNN模型；5将视频帧输入预训练完成的VGG16模型中提取空间特征；6将空间特征进行堆叠分片、池化后对LSTM神经网络模型进行训练,得到CNN-LSTM模型；7将LEMHI-CNN模型和CNN-LSTM模型的识别结果进行加权融合即得到最终识别结果。本发明能显著提高视频情感识别率。
- 单位
