VALSE 论文速览 第36期：高保真任意范围的人脸编辑

论文题目：高保真任意范围的人脸编辑

作者列表：高月 (北京大学王选计算机研究所，微软亚洲研究院)，魏芳芸 (微软亚洲研究院)，鲍建敏 (微软亚洲研究院)，古纾旸 (中国科学技术大学)，陈栋 (微软亚洲研究院)，Fang Wen (微软亚洲研究院)，连宙辉 (北京大学王选计算机研究所)

B站观看网址：

https://www.bilibili.com/video/BV1bL4115771/

复制链接到浏览器打开或点击阅读原文即可跳转至观看页面。

论文摘要：

循环一致性 (cycle consistency)被广泛用于人脸编辑。然而，本文观察到，生成器倾向于找到一种狡猾的方式来隐藏原始图像的信息，以满足循环一致性的约束，使得它无法保持非编辑区域的丰富细节 (如皱纹和痣)。本文提出了一个简单且有效的方法HifaFace，从两个方面解决上述问题。首先，通过将输入图像的高频信息直接输入到生成器的末端，减轻生成器合成丰富细节的压力。第二，采用一个额外的判别器来鼓励生成器合成丰富的细节。具体而言，应用小波变换将图像变换到频域，其中的高频部分可以用来恢复输入图像中包含的丰富的细节。本文还注意到，对属性的精细化和更大范围的控制对人脸编辑任务而言是非常重要的。为了实现这一目标，本文还提出了一种新的属性回归损失。实验表明，在所提出的框架支持下，本文方法实现了高保真和任意范围的人脸编辑，性能超过了当前其他最先进的方法。

论文信息：

[1]Yue Gao, Fangyun Wei, Jianmin Bao, Shuyang Gu, Dong Chen, Fang Wen, and Zhouhui Lian. "High-Fidelity and Arbitrary Face Editing." In Proceedings of the IEEE/CVF Conference on Computer Vision and Pattern Recognition  (CVPR’21), pp. 16115-16124. virtual, June 2021.

论文链接：

[https://openaccess.thecvf.com/content/CVPR2021/papers/Gao_High-Fidelity_and_Arbitrary_Face_Editing_CVPR_2021_paper.pdf]

项目链接：

[https://yuegao.me/HifaFace/]

视频讲者简介：

高月，北京大学硕士研究生，微软亚洲研究院研究员，研究方向为计算机视觉，图像生成，视频理解与处理等。

特别鸣谢本次论文速览主要组织者：

月度轮值AC：张正 (哈尔滨工业大学(深圳))、李爽 (北京理工大学)

季度责任AC：许永超 (武汉大学)