科研之友
微信
新浪微博
Facebook
分享链接
摘要
本发明公开了一种机器人采摘果实的视觉引导方法,涉及图像识别和处理技术领域。该方法步骤如下：通过Realsense D435i传感器获取RGB图像和深度图像；使用目标检测神经网络对RGB图像中的果实进行识别和定位,截取检测框区域作为ROI图像；对深度图像检测框中果实表面块状分布的数据进行分割,实现实例分割的效果,获得果实的掩膜图像；基于球坐标系偏微分求解掩膜图像和深度图像中果实表面各点的法向量；求解果实采摘位置和姿态,为机器人进行采摘操作时提供目标果实的位置和姿态；发送位置和姿态信息给机械臂机器人,控制机械臂运动规划实现采摘任务。本发明对机器人视觉引导采摘水果任务实现一套完整有效的解决办法。
- 单位
