融合Transformer和CNN的手掌静脉识别网络

作者：吴凯; 沈文忠; 贾丁丁; 梁娟

来源：计算机工程与应用, 2022, 1-17.

• 手掌静脉识别
• Transformer Encoder
• Do-Conv
• NAM
• AAM-Loss

针对手掌静脉特征提取识别精度不高问题，本文提出了掌静脉识别网络PVCodeNet。该网络设计了改进的BasicBlock和Transformer Encoder模块结合并运用扩大决策边界的损失函数AAM-Loss（Additive Angular Margin Loss）。该网络首次将Transformer Encoder模块成功用于掌静脉图像全局特征提取，改进的BasicBlock使用深度超参数化卷积Do-Conv取代传统卷积Conv进行特征提取使提取的特征更加具有区分性，该模块还加入规一化的注意力机制NAM模块，通过应用权重稀疏性惩罚项抑制不显著性特征的权值来提取图像在通道和空间域上重要的细节特征。本文在手掌关键点定位、ROI提取、图像增强方面作了详细描述，然后在特征向量维度、AAM-Loss参数设置方面做了详细实验，最后在PolyU数据库和自建库SEPAD-PV数据库上进行消融实验测试，EER均达到了0，成功实现了最高识别率的突破。为了验证该网络的泛化性能，还在具有相似纹理特征的掌纹数据库Tongji和指静脉数据库SDUMLA上进行验证，EER远远优于其它主流算法，充分证明了本文算法的优越性。

• 单位
  上海电力大学