基于层间互相关感知损失的风格迁移方法

作者：庄轩权; 李彩霞; 黎培兴^*

来源：中山大学学报(自然科学版), 2020, 59(06): 126-135.

DOI：10.13471/j.cnki.acta.snus.2019.10.11.2019a079

• 风格迁移
• Gram矩阵
• 卷积神经网络
• 风格损失函数
• 感知损失
• 深度学习

深度学习在风格迁移领域的应用使一系列以图片艺术风格化为核心的产品真正落地,而从像素级损失向基于Gram矩阵的感知损失的转变是其中最关键的跨越。Gram矩阵在艺术风格特征的提取上有良好的效果,但其局限于同等级语义特征间相关性统计的做法并不能作为艺术风格的充分表示。自Gram矩阵被提出以来,一系列研究并未对其进行充分的研究和改进,而是关注于模型结构的设计以提高风格迁移的速度。提出使用层间互相关矩阵作为Gram矩阵的代替或补充进行风格迁移任务的风格损失函数计算。实验表明,在得到相似水平输出结果的情况下,使用层间互相关矩阵方法可以降低20%的计算时间。

• 单位
  中山大学; 数学学院