半监督特征重构的无约束条件下人脸表情识别方法

作者：魏冰鑫; 郭哲^*; 刘佳怡; 刘雪文

来源：中国体视学与图像分析, 2023, 28(02): 143-154.

DOI：10.13505/j.1007-1482.2023.28.02.003

• 人脸表情识别
• 半监督学习
• 特征重构

针对无约束条件下人脸表情数据的标签不足问题，本文提出了半监督特征重构的人脸表情识别方法。首先，构建了多头卷积神经网络，每个卷积头倾向于提取不同的特征，以丰富特征多样性；其次，使用五官关键点坐标构建结果用于提取局部特征的关键特征分支；再次，构建了自训练重采样模块，利用少数类的高精度预测补充标签数量；最后，使用一致性正则损失和伪标签方法学习无标签数据。分别在包含400个标签的RAF-DB和FERPlus数据集和包含250个标签的CIFAR-10数据集上进行测试，实验结果表明，所提方法的识别率分别达到68.88%、77.38%和95.75%,方法优于经典的半监督学习方法。

• 单位
  西北工业大学