摘要
本发明提供了一种基于数据可靠性评价的非接触式负性心境检测方法和装置,涉及负性心境检测技术领域。本发明实施例根据可见光图像和热红外图像数据的质量评价方法,设计了多模态数据可靠性评估机制,计算双模态数据的动态可靠性、静态可靠性以及每个模态数据的总体可靠性,同时还构建了多模态数据融合网络提取双模态数据特征,并在特征融合层基于数据可靠性进行双模态数据特征融合,用于端到端的检测负性心境状态。相比于传统的特征拼接方式,基于数据可靠性评价的特征融合方式能够有效区分不同模态数据对于负性心境检测的重要性,增强模型的鲁棒性。
- 单位