摘要

随着老龄化社会的到来,养老院利用机械臂为行动不便的人提供必要帮助已成为必然。在复杂场景下,机械臂自动识别身体部位进行精确定位具有一定的局限性。本文设计基于深度学习的坐标回归算法进行人脸检测,根据检测到的人脸关键点的拓扑结构确定人脸区域,然后根据嘴巴在人脸中的大致区域和鼻子关键点的特殊性确定嘴巴位置的辅助喂食系统。采用Visual studio2017+OpenCV3.7+Python3.7搭建的实验平台,利用双目视觉技术获取的真实场景下的物体进行三维重建。结合SGBM算法进行深度云的创建,计算出人体部位的世界坐标,并实时将三维坐标值传给机器人或机械臂,实现机械臂对人体部位的接触与交互。