GAN Prior Embedded Network for Blind Face Restoration in the Wild

Paper:GAN Prior Embedded Network for Blind Face Restoration in the Wild

Accept:CVPR2021
Code

Problem:

野外人脸复原(Blind face restoration)，属于人脸复原任务中的一种，类似于超分，inpainting等工作。文章为了解决野外人脸的退化复杂性(噪声，缺损，分辨率低等)，提出了解决方法。

Framework

在原先的styelgan中，需要W和noise，也就是调制模块中的A和B。

• w：
  将W修改为encoder得到的z，再经过mapping网络得到W。
• noise:
  使用encoder中的浅层空间信息，同时这里作者将原先直接add的方式修改为concat，并在后续的实验中验证这两种方式的优劣。
  通过这种方法，作者认为可以比较好地结合全局信息(w,也就是z,感受野更大)和局部信息(noise,感受野更小)，从而使得生成图像的质量更好。
  和之前基于stylegan的方法不同的是，作者这里对stylegan进行了finetune。