基于遗传算法的多模态情感特征融合方法

作者：卢官明; 程晓; 李霞; 闫静杰; 李海波

来源：南京邮电大学学报(自然科学版), 2019, 39(05): 41-47.

DOI：10.14132/j.cnki.1673-5439.2019.05.007

• 多模态情感识别
• 特征融合
• 特征选择
• 遗传算法

为了提高情感识别的准确率,针对单模态情感识别率低以及常规特征融合方法存在的缺点,提出了一种基于遗传算法的多模态情感特征融合方法,利用遗传算法对多个模态的情感特征进行选择、交叉以及重组。在eNTRAFACE’05表情-语音双模态情感数据库上进行了情感识别测试,对基于面部表情或语音的单模态情感识别,以及基于特征层或决策层融合的各种双模态情感识别的性能进行了比较。实验结果表明,双模态情感识别的性能高于单模态情感识别,而且文中提出的基于遗传算法的多模态情感特征融合方法比其他几种常规的特征融合方法的效果好,验证了文中提出的方法的可行性和有效性。

• 单位
  通信与信息工程学院; 南京邮电大学