迪士尼提出基于深度神经网络的角色人脸自动替换算法

作者：方捷新

来源：现代电影技术, 2020, (10): 62.

<正>近日,迪士尼研究院(Disney Research Studios)、苏黎世联邦理工大学(ETH Zurich)联合在欧洲图形学会渲染研讨会(Eurographics Symposium on Rendering,EGSR)发表论文《用于视效制作的高分辨率神经网络人脸替换》(High-Resolution Neural Face Swapping for Visual Effects),提出一种基于深度神经网络(Deep Neural Networks)的角色人脸自动替换算法,可将照片/视频中角色的面部替换为目标角色面部。论文提出,该算法支持最大图像分辨率1024×1024,是首个可实现百万像素(Megapixel)分辨率的人脸替换算法,适用于场景中所有角色的人脸替换,并可在合成环节自动调整对比度和光照条件,从而确保合成面部与场景充分匹配。该算法的效率与当前流行的Deepfake (支持面部图像最大分辨率256×256)等工具相当,改进后有望应用于影视制作,如制作角色年轻版/老年版形象,或将替身演员面部替换为明星面部。