基于多元损失函数的多模态情感分析方法、系统、设备及介质

作者:张文博; 翟博文; 刘龙; 张梦璇; 姬红兵; 臧博; 李林
来源:2023-05-29, 中国, CN202310617198.7.

摘要

基于多元损失函数的多模态情感分析方法、系统、设备及介质,方法包括:数据预处理,模型构建,模型训练及优化,任务迁移;系统、设备及介质用于实现基于多元损失函数的多模态情感分析方法;本发明通过基于交叉注意力机制的编码器进行模态融合,并利用对比学习框架进行多元损失函数的辅助训练,同时设置不同的迁移函数对不同的下游任务进行迁移,具有提升数据处理效率和融合效率,最大化利用相关性信息,降低噪声干扰,提高模型准确度、迁移性和鲁棒性的特点。