摘要
本发明属于计算机视觉与人工智能领域,具体涉及一种基于先验信息的人脸热红外-可见光图像转换方法。在对比学习框架下,本发明设计了一种基于人脸解析图作为先验信息去引导生成网络学习人脸图像的局部纹理信息。基于先验信息的人脸热红外-可见光生成网络模型主要包括人脸解析图条件网络模块、空间特征变换映射层、注意力模块、生成器网络模块以及判别器;该模型通过空间特征变换映射层STL进行转换,它以人脸解析图映射特征为先验条件,生成一对调制参数,根据调制参数对生成网络的人脸特征进行仿射变换,从而自适应地优化人脸图像的生成质量,同时通过设计的人脸梯度增强损失一起监督学习,有利于缓解人脸生成图像上的伪影出现,提高局部纹理细节,使图像生成尽可能还原对应的人脸属性信息。
- 单位