一种基于人脸识别与手势识别的机器人控制方法

作者：陈逸东; 魏武

来源：2020-12-28, 中国, ZL202011585076.7.

本发明公开了一种基于人脸识别与手势识别的机器人控制方法,包括以下步骤：1)在人脸样本库中录入待识别的人脸图像,通过视频流截取其中的帧进行命名保存；2)使用Lableimg标注工具对采集的图像进行人脸区域标注和检测目标标注,形成人脸自建数据集；3)在手势样本库中录入待识别的手势图像,通过视频流截取其中的帧进行命名保存；4)使用Lableimg标注工具对采集的图像进行手型区域标注,形成手势自建数据集；5)构造多任务深度神经网络模型；6)使用自建数据集对模型进行训练,并通过模型调优得到最终满足要去的多任务深度神经网络模型。本发明能在人员密集的场景下精确的完成对手势的识别和对机器人的控制。

• 单位
  华南理工大学