一种基于模态增广的近红外与可见光跨模态人脸识别方法

作者：孙锐; 章晗; 程志康; 单晓全; 孙琦景

来源：2021-01-25, 中国, ZL202110095445.2.

本发明公开一种基于模态增广的近红外与可见光跨模态人脸识别方法,包括：采集近红外人脸图像集和可见光人脸图像集；构建用于近红外人脸到辅助可见光人脸转换的生成对抗网络并训练,将近红外人脸图像集转换成辅助可见光人脸图像；将辅助可见光人脸图像作为辅助模态,与近红外人脸图像集和可见光人脸图像集共同组成三模态图像组；构建卷积神经网络,利用所述三模态图像组训练得到跨模态人脸识别器；将待识别数据输入到所述识别器中进行跨模态人脸识别,输出识别结果。本发明能增加辅助模态以弥补模态之间的差异,充分提取近红外和可见光的跨模态不变人脸特征信息,从而提高近红外与可见光跨模态人脸识别准确度。

• 单位
  合肥工业大学