模式识别与人工智能
2025年4月11日 星期五   首 页     期刊简介     编委会     投稿指南     伦理声明     联系我们                                                                English
模式识别与人工智能  2022, Vol. 35 Issue (10): 863-880    DOI: 10.16451/j.cnki.issn1003-6059.202210001
深度学习在图像与视觉的应用 最新目录| 下期目录| 过刊浏览| 高级检索 |
基于多任务对抗和抗噪对抗学习的人脸超分辨率算法
陈泓佑1, 陈帆1, 和红杰1, 蒋桐雨1
1.西南交通大学 信号与信息处理四川省高校重点实验室 成都 611756
Face Super-Resolution Algorithm Based on Multi-task Adversarial and Antinoise Adversarial Learning
CHEN Hongyou1, CHEN Fan1, HE Hongjie1, JIANG Tongyu1
1. Key Laboratory of Signal and Information Processing, Sichuan Province, Southwest Jiaotong University, Chengdu 611756

全文: PDF (2122 KB)   HTML (1 KB) 
输出: BibTeX | EndNote (RIS)      
摘要 

高倍率单幅人脸图像超分辨率重建是一项具有实用价值但困难的任务.在人脸超分辨率任务中,端到端网络超分辨率图像较模糊,图像真实性和人眼视觉效果较差.针对上述问题,文中提出基于多任务对抗和抗噪对抗学习的人脸超分辨率算法.算法分为端到端网络学习阶段和网络参数微调阶段.为了提高端到端学习效果,设计深度多任务拉普拉斯金字塔网络,并结合多任务对抗学习.主任务为端到端学习,子任务为优化对抗学习惩罚项函数.为了改进通过对抗学习并微调主任务网络参数后的效果,在对抗学习的判别器优化过程中,融入抗噪对抗学习.实验表明,文中算法能使人脸超分辨率图像更具有图像真实性,更符合人眼视觉习惯.

服务
把本文推荐给朋友
加入我的书架
加入引用管理器
E-mail Alert
RSS
作者相关文章
陈泓佑
陈帆
和红杰
蒋桐雨
关键词 深度学习人脸超分辨率(FSR)多任务对抗学习(MTAL)抗噪对抗学习(ANAL)多任务拉普拉斯金字塔网络(MTLapNet)    
Abstract

The super-resolution(SR) of high magnification single face image is a hard but valuable task. In the face super-resolution(FSR) task, the end-to-end network SR image is fuzzy, and the photoreality and human visual effect are poor. Aiming at the problems, a FSR algorithm based on multi-task adversarial learning(MTAL) and antinoise adversarial learning(ANAL) is proposed. The algorithm is divided into end-to-end network learning and network parameters fine-tuning. To improve the end-to-end learning result, a deep multi-task Laplacian pyramid network(MTLapNet) is designed and integrated with MTAL. The main task is end-to-end learning, while the subtask is the optimization of adversarial learning penalty function. To improve the result of adversarial learning and parameters fine-tuning of the main task network, ANAL is integrated into the optimization process of discriminator of adversarial learning. The experiments show that the proposed algorithm can make the FSR image more photo-realistic and more consistent with human visual habits.

Key wordsDeep Learning    Face Super-Resolution(FSR)    Multi-task Adversarial Learning(MTAL)    Antinoise Adversarial Learning(ANAL)    Multi-task Laplacian Pyramid Network(MTLapNet)   
收稿日期: 2022-04-18     
ZTFLH: TP 391.41  
  TP 183  
基金资助:

国家自然科学基金项目(No.U1936113,61872303)资助

通讯作者: 和红杰,博士,教授,主要研究方向为图像取证、图像处理.E-mail:hjhe@home.swjtu.edu.cn.   
作者简介: 陈泓佑,博士,主要研究方向为机器学习、图像处理.E-mail:chy2019@foxmail.com. 陈 帆,博士,副教授,主要研究方向为多媒体安全、计算机应用.E-mail:fchen@home.swjtu.edu.cn. 蒋桐雨,硕士研究生,主要研究方向为人脸超分辨率.E-mail:jiangty971018@163.com.
引用本文:   
陈泓佑, 陈帆, 和红杰, 蒋桐雨. 基于多任务对抗和抗噪对抗学习的人脸超分辨率算法[J]. 模式识别与人工智能, 2022, 35(10): 863-880. CHEN Hongyou, CHEN Fan, HE Hongjie, JIANG Tongyu. Face Super-Resolution Algorithm Based on Multi-task Adversarial and Antinoise Adversarial Learning. Pattern Recognition and Artificial Intelligence, 2022, 35(10): 863-880.
链接本文:  
http://manu46.magtech.com.cn/Jweb_prai/CN/10.16451/j.cnki.issn1003-6059.202210001      或     http://manu46.magtech.com.cn/Jweb_prai/CN/Y2022/V35/I10/863
版权所有 © 《模式识别与人工智能》编辑部
地址:安微省合肥市蜀山湖路350号 电话:0551-65591176 传真:0551-65591176 Email:bjb@iim.ac.cn
本系统由北京玛格泰克科技发展有限公司设计开发 技术支持:support@magtech.com.cn