摘要
本发明公开了一种从近红外光到可见光的跨模态眼睛状态识别方法。所述方法包括以下步骤:构建可见光眼睛状态数据集;获取近红外眼睛状态数据集,可见光眼睛状态数据集混合,构建训练集和验证集;构建从近红外光到可见光的跨模态眼睛状态识别框架;对自训练集输入的眼睛状态样本进行处理;对自训练集输入的眼睛状态样本提取梯度信息;识别眼睛状态;对从近红外光到可见光的跨模态眼睛状态识别框架进行模型训练直至收敛;完成眼睛状态的识别。本发明充分考虑多方面因素,充分利用眼睛状态识别本身的特点,同时结合跨模态通用的做法,在保证眼睛状态识别方法在近红外光下的识别性能的同时大幅度提高在可见光下的识别性能。
- 单位