针对传统物料识别、跟踪技术无法实施在线跟踪的问题,提出一种基于深度学习的有色金属加工物料跟踪技术,该技术先采用Yolov3识别物料,然后采用DeepSort跟踪物料,最后通过二维和三维坐标转换获取现实物料库的定位信息。通过pycharm平台实验验证,该方案能够应用到实际应用中,满足物料识别和跟踪的准确性。