在零件加工过程中,能够及时的发现加工工件的表面缺陷,可以保证加工质量。针对由于刀痕影响工件表面缺陷不易检测的问题,提出一种基于谱残差视觉显著模型的工件表面缺陷检测算法。首先,对工件表面图像预处理,使用同态滤波方法消除工件表面光照不均匀的影响;然后提出改进的谱残差视觉显著模型,大致定位缺陷;随后使用视觉显著性和超像素分割相结合的算法来进一步确定缺陷的位置;最后使用形态学运算,得到最终的检测结果。在现场采集图片库上客观实验评估表明,该算法具有很高的准确率且检测速度快。