针对复杂作业场景下的行为检测因光照、遮挡等因素导致错检、漏检且检测不达实时问题,提出一种基于图卷积的作业行为实时检测方法。对作业人员定位,过滤无关人员减少计算量,采用骨架提取并结合跟踪算法完成相邻帧间的目标匹配,采用优化后的图卷积神经网络进行不规范行为检测。以油田井场阀门操作为实验背景,该识别算法的处理速度能达到25fps,不规范阀门操作行为识别准确率达96.7%,能够达到实时识别。