驾驶员的违章行为是造成交通事故的主要原因之一,利用摄像头实时监控行驶过程中的驾驶员违章行为是一个减少交通事故的有效方法。本文提出一种通过深度神经网络的驾驶员违章行为识别方法。首先,利用Deep-Pose检测驾驶员身体关键点,接着,基于这些关键点提取动作特征,然后使用最近邻分类器识别典型违章行为。实验证明,本文的方法对于典型的违章行为是有效的。