一种基于深度学习的人体动作捕捉与虚拟动画生成方法

作者:林杰; 崔健; 石光明; 刘丹华; 齐飞; 赵光辉; 金星
来源:2019-04-16, 中国, CN201910304590.X.

摘要

本发明公开了一种基于深度学习的人体动作捕捉与虚拟动画生成方法,包含以下步骤:A、采集演员动作并转换成视频流信号输入;B、姿态检测网络预训练;C、提取人体姿态序列;D、姿态条件生成对抗网络预训练;E、将姿态序列输入姿态条件生成对抗网络,输出与人体动作同步的动画视频。本发明有效的减少了动画制作的成本,提升了普通用户的可操作性,也提高了动画的产出效率,可作为一种媒体创建工具来进行特效演示、Demo的实时生成以及动画和电影的快速制作,也可作为短视频应用中的交互式滤镜,虚拟现实体感游戏的辅助等,从而有利于动作捕捉技术大范围落地商用与推广。