摘要
本发明提供了一种基于注意力的多通道数据融合网络AMDFN架构,所述AMDFN包括:数据预处理模块、多通道数据融合模块和层注意模块;所述数据预处理模块用于对原始的三维人脸扫描图像进行预处理,然后将其映射为8种二维人脸属性图像;所述多通道数据融合模块主要对映射后的8种二维人脸属性图像进行8个通道的图像融合,然后将训练集和测试集输入到ResNet骨干中,提取与表情相关的特征;所述层注意模块对网络中不同层的特征之间的相互依赖关系进行建模,通过为不同层次的特征分配不同的注意权重来提高特征的表示能力。本发明执行速度快、效率高,并且实验表明面部表情识别性能也得到大幅提高。
- 单位