基于深度学习和面部多特征融合的驾驶员疲劳检测研究

作者：张闯; 朱天军^*; 李学民

来源：计算机测量与控制, 2022, 30(12): 42-50.

DOI：10.16526/j.cnki.11-4762/tp.2022.12.007

• 疲劳检测
• 眼睛纵横比
• 眼睛闭合百分比
• 嘴巴高宽比
• 深度学习

驾驶员疲劳驾驶是造成交通事故的重要原因之一，因此提出了基于深度学习和面部多特征融合的驾驶员疲劳检测研究方法；首先采用多任务级联卷积神经网络MTCNN(multi-task convolutional neural network)结构进行面部检测和特征点定位，并利用Dlib工具包中的面部68个地标，提取驾驶员面部的特征参数；其次，基于眼睛纵横比(EAR),眼睛闭合百分比(PECLORS)和嘴巴高宽比(MAR)的值按不同的权值相加得到参数M,在一定时间内累加M>0.605的帧数判断驾驶员疲劳的程度；最后，试验结果表明：该方法能够有效地利用视频图像实时检测驾驶员疲劳状态，其准确率和灵敏度分别为93.1%和90.2%,对于保护驾驶员及车辆行驶安全具有重大意义。

• 单位
  河北工程大学; 清华大学; 肇庆学院