为了增强对整体态势的掌控与理解能力,将真实人手引入,利用虚拟手与场景进行交互,自然高效地完成任务。根据人手的运动特性,采用基于惯性传感器的手部骨骼长度比例计算方法,基于运动学位置解算实现了手部运动跟踪。针对虚拟场景,识别典型的手部动作序列,设计了基于上下文语义理解的交互过程以及双手协同模式下的交互模型,并在场景中得到了应用验证,获得良好的用户体验。