基于多级隐空间信息约束的噪声人脸超分辨率算法
CSTR:
作者:
作者单位:

东北大学 机器人科学与工程学院,沈阳 110169

作者简介:

通讯作者:

E-mail: wuchengdong@mail.neu.edu.cn.

中图分类号:

TP391

基金项目:

国家自然科学基金项目(U20A20197,61973063);辽宁省重点研发计划项目(2020JH2/10100040);辽宁省自然科学基金项目(2021-KF-12-01);中国科学院光电信息处理重点实验室开放基金项目(OEIP-O-202005).


Noisy face super-resolution method based on multi-level latent space information constraints
Author:
Affiliation:

Faculty of Robot Science and Engineering,Northeastern University,Shenyang 110169,China

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    为了实现强噪声和模糊干扰下的低清人脸图像重建,提出一种基于多级隐空间信息约束的噪声人脸超分辨率算法.首先设计一个用于人脸有效信息提取的特征蒸馏网络, 并通过统计性抗干扰模型和隐空间特征对比算法移除噪声等无效信息,构建一个具有高噪声鲁棒性的人脸信息提取模型;然后,设计人脸重建网络,该网络利用提取的人脸特征重建高清人脸图像; 最后,通过人脸身份嵌入模型和离散小波变换模型,分别从超球面身份度量空间和小波域进一步对重建人脸的身份信息和空间结构进行约束.实验结果表明,所提出的算法不仅能够有效去除高噪声环境下的人脸噪声,而且还能有效提升人脸图像分辨率,获得更高的峰值信噪比(peak signal-to-noise ratio,PSNR)和结构相似度(structural similarity index,SSIM),具有较好的实用性.

    Abstract:

    To super-resolve low-resolution(LR) face image suffering from strong noise and fuzzy interference, we propose a noisy face super-resolution(FSR) method based on multi-level latent space information constraints. Firstly, we design a feature distillation network to extract effective facial information, which exploits a statistical anti-interference model and a latent contrast algorithm to remove invalid information such as noise. Then, we design a face reconstruction network, which utilizes the extracted face features to reconstruct high-resolution(HR) face images. Finally, we deploy a face identity embedding model and a discrete wavelet transform model to further supervise the reconstruction of identity information and spatial structure from the hypersphere identity metric space and wavelet domain respectively. The experimental results show that the proposed method not only removes the noise from face in the high noise environment, but also improves the resolution of the face image effectively, which obtains higher PSNR, SSIM, and good practicability.

    参考文献
    相似文献
    引证文献
引用本文

滕辎,于晓升,吴成东.基于多级隐空间信息约束的噪声人脸超分辨率算法[J].控制与决策,2024,39(5):1469-1477

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:
  • 最后修改日期:
  • 录用日期:
  • 在线发布日期: 2024-04-17
  • 出版日期: 2024-05-20
文章二维码