Face Restoration (FR) aims to restore High-Quality (HQ) faces from Low-Quality (LQ) input images, which is a domain-specific image restoration problem in the low-level computer vision area. The early face restoration methods mainly use statistical priors and degradation models, which are difficult to meet the requirements of real-world applications in practice. In recent years, face restoration has witnessed great progress after stepping into the deep learning era. However, there are few works to systematically study the deep learning based face restoration methods. Thus, in this paper, we provide a comprehensive survey of recent advances in deep learning techniques for face restoration. Specifically, we first summarize different problem formulations and analyze the characteristics of face images. Second, we discuss the challenges of face restoration. With regard to these challenges, we present a comprehensive review of recent FR methods, including prior-based methods and deep-learning methods. Then, we explore developed techniques in the task of FR covering network architectures, loss functions, and benchmark datasets. We also conduct a systematic benchmark evaluation on representative methods. Finally, we discuss the future directions including network designs, metrics, benchmark datasets, applications, etc. We also provide an open source repository for all the discussed methods, which is available at https://github.com/TaoWangzj/Awesome-Face-Restoration.


翻译:人脸复原旨在从低质量输入图像中恢复高质量人脸,是低层计算机视觉领域中的一项特定图像复原问题。早期人脸复原方法主要采用统计先验与退化模型,难以满足实际应用场景的需求。近年来,随着深度学习时代的到来,人脸复原取得了显著进展。然而,目前鲜有工作系统性地研究基于深度学习的人脸复原方法。为此,本文对深度学习技术在人脸复原领域的最新进展进行了全面综述。具体而言,我们首先归纳了不同的问题建模方式,并分析了人脸图像的特性;其次,讨论了人脸复原面临的挑战;针对这些挑战,我们对近期的人脸复原方法进行了综合评述,涵盖基于先验的方法与深度学习方法;随后,探究了人脸复原任务中涉及的技术发展,包括网络架构、损失函数和基准数据集;同时,我们对代表性方法进行了系统性的基准评估;最后,讨论了未来研究方向,包括网络设计、评估指标、基准数据集、应用等。我们还为所有讨论的方法提供了开源资源库,地址为 https://github.com/TaoWangzj/Awesome-Face-Restoration。

0
下载
关闭预览

相关内容

人脸合成技术综述
专知会员服务
25+阅读 · 2021年11月21日
【CVPR2021】GAN人脸预训练模型
专知会员服务
24+阅读 · 2021年4月10日
视频人脸识别进展综述
专知会员服务
56+阅读 · 2021年3月12日
专知会员服务
22+阅读 · 2021年1月5日
专知会员服务
29+阅读 · 2020年12月16日
专知会员服务
80+阅读 · 2020年10月2日
最新《深度学习人脸识别》综述论文,
专知会员服务
68+阅读 · 2020年8月10日
图像修复研究进展综述
专知
20+阅读 · 2021年3月9日
人脸相关算法、数据集、文献资源大列表
专知
16+阅读 · 2019年3月16日
人脸识别技术全面总结:从传统方法到深度学习
算法与数学之美
12+阅读 · 2019年2月27日
Deep Image Prior——图像恢复入门
中国人工智能学会
15+阅读 · 2019年2月16日
清华大学发布:人脸识别最全知识图谱
全球创新论坛
10+阅读 · 2018年11月21日
人脸识别最全知识图谱—清华大学出品
人工智能学家
10+阅读 · 2018年10月28日
从传统方法到深度学习,人脸关键点检测方法综述
机器之心
14+阅读 · 2017年12月17日
人脸检测与识别总结
计算机视觉战队
21+阅读 · 2017年11月29日
国家自然科学基金
3+阅读 · 2017年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
5+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
Arxiv
14+阅读 · 2023年9月27日
Deep Face Recognition: A Survey
Arxiv
18+阅读 · 2019年2月12日
VIP会员
最新内容
美国从乌克兰无人机战争中学习经验
专知会员服务
6+阅读 · 6月21日
ICML 2026 | 面向视觉语言模型的语义鲁棒性认证
专知会员服务
2+阅读 · 6月21日
学习数据的几何:形状空间分析数学综述
专知会员服务
9+阅读 · 6月17日
定向能反无人机系统最新发展动态
专知会员服务
11+阅读 · 6月17日
相关VIP内容
人脸合成技术综述
专知会员服务
25+阅读 · 2021年11月21日
【CVPR2021】GAN人脸预训练模型
专知会员服务
24+阅读 · 2021年4月10日
视频人脸识别进展综述
专知会员服务
56+阅读 · 2021年3月12日
专知会员服务
22+阅读 · 2021年1月5日
专知会员服务
29+阅读 · 2020年12月16日
专知会员服务
80+阅读 · 2020年10月2日
最新《深度学习人脸识别》综述论文,
专知会员服务
68+阅读 · 2020年8月10日
相关资讯
图像修复研究进展综述
专知
20+阅读 · 2021年3月9日
人脸相关算法、数据集、文献资源大列表
专知
16+阅读 · 2019年3月16日
人脸识别技术全面总结:从传统方法到深度学习
算法与数学之美
12+阅读 · 2019年2月27日
Deep Image Prior——图像恢复入门
中国人工智能学会
15+阅读 · 2019年2月16日
清华大学发布:人脸识别最全知识图谱
全球创新论坛
10+阅读 · 2018年11月21日
人脸识别最全知识图谱—清华大学出品
人工智能学家
10+阅读 · 2018年10月28日
从传统方法到深度学习,人脸关键点检测方法综述
机器之心
14+阅读 · 2017年12月17日
人脸检测与识别总结
计算机视觉战队
21+阅读 · 2017年11月29日
相关基金
国家自然科学基金
3+阅读 · 2017年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
5+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
Top
微信扫码咨询专知VIP会员