结构引导的图像修复

作者：胡凯; 赵健^*; 刘昱; 牛余凯; 姬港

来源：北京航空航天大学学报, 2022, 48(07): 1269-1277.

DOI：10.13700/j.bh.1001-5965.2021.0004

• 图像修复
• 语义内容
• 视觉伪影
• 边缘结构生成器
• 粗网络
• 精细网络

针对粗网络引入先验知识较少使得补全的内容存在明显视觉伪影问题，提出了基于边缘结构生成器的两段式图像修复方法。采用边缘结构生成器对输入的图像边缘和色彩平滑信息进行特征学习，生成缺失区域的结构内容，以引导精细网络重构高质量的语义图像。通过在公开的图像修复基准数据集Paris Street-View上进行实验测试，结果表明，所提模型可对掩膜占比达50%的图像进行补全。在客观的量化评价指标上，峰值信噪比、结构相似度系数、L1和L2均值误差等数值整体优于EC、GC、SF等方法，其中，掩膜占比为0%～20%时，峰值信噪比指数达到33.40 dB,优于其他方法2.37～6.57 dB,结构相似度系数提高了0.006～0.138。同时，补全的图像纹理更清晰，视觉质量更高。

• 单位
  天津大学