科研之友
微信
新浪微博
Facebook
分享链接
摘要
本发明公开了一种结合人像行为信息的双目投影人机交互方法,该方法包括：对摄像头捕获区域进行边缘检测；对边缘检测后的图像进行直线检测；通过单应性变换矩阵求解视角变换下的映射关系；利用YOLOv3目标检测算法对交互对象进行识别,获取从投影区域坐标映射到Unity3D开发场景中的游戏坐标；通过双目摄像头测距获得交互对象的深度信息；通过Kinect摄像头获得交互者的骨骼关键点位置,再在Uinty3D软件中虚拟化人物对象以及相应的交互动作；本发明能够利用深度学习的方法进行人机交互,同时结合双目摄像头测得的交互对象深度信息,以及交互者的人像行为信息,可以很大程度地提高投影人机交互系统的交互性。
- 单位
