基于多尺度运动信息分离动画特效和背景内容的方法

作者：徐雪妙; 屈玮; 韩楚

来源：2021-01-26, 中国, ZL202110101404.X.

本发明公开了一种基于多尺度运动信息分离动画特效和背景内容的方法,包括：1)获取动画视频中带有特效片段的序列帧；2)计算序列帧中每一帧与其它帧之间的单尺度特效预测图集合；3)合并每一帧的单尺度特效预测图集合作为多尺度特效预测；4)通过自注意力机制得到自注意力多尺度特效集合特征；5)通过三维卷积神经网络层提取输入序列帧的特征；6)联合序列帧的特征和自注意力多尺度特效集合特征；7)通过三维残差卷积神经网络分离特效序列帧和透明通道信息；8)将序列帧和特效序列帧作差,得到残损背景序列帧；9)通过三维卷积神经网络得到修复的背景序列帧。本发明可应用在特效迁移,以及提升在动画中分割以及识别特定对象的准确率。

• 单位
  华南理工大学