基于Leapmotion的VR钢琴及手势识别的设计与实现

作者:周家乐; 贺元昭; 章艺敏; 顾睿杰; 殷悦; 杨富琴*
来源:电子测试, 2020, (21): 5-9.
DOI:10.16520/j.cnki.1000-8519.2020.21.001

摘要

随着数字信息化技术的快速发展,人们越来越倾向于使用自然、方便的方式实现人机交互。本文以Leapmotion传感器为硬件平台,以Unity3D和leapmotion插件为软件平台开发了一款虚拟钢琴的游戏。并且通过对leapmotion设备的开发研究,实现了通过算法对leapmotion传感器采集手势信息的处理识别,借助手势识别算法分出不同的手势以此来达成不同的响应。本文开发的虚拟钢琴极度还原现实中的钢琴,可以通过双手进行无实物演奏。可以运用于新式教育,钢琴音乐游戏等方面,具有广泛的推广应用价值。