文档名：融合参考先验与生成先验的老照片修复
目的：修复老照片具有重要的实用价值,但老照片包含多种未知复杂的退化,传统的修复方法组合不同的数字图像处理技术进行修复,通常产生不连贯或不自然的修复结果.基于深度学习的修复方法虽然被提出,但大多集中于对单一或有限的退化进行修复.针对上述问题,本文提出一种融合参考先验与生成先验的生成对抗网络来修复老照片.方法：对提取的老照片和参考图像的浅层特征进行编码获得深层语义特征与潜在编码,对获得的潜在编码进一步融合获得深度语义编码,深度语义编码通过生成先验网络获得生成先验特征,并且深度语义编码引导条件空间多特征变换条件注意力块进行参考语义特征、生成先验特征与待修复特征的空间融合变换,最后通过解码网络重建修复图像.结果：实验与6种图像修复方法进行了定量与定性评估.比较了4种评估指标,本文算法的所有指标评估结果均优于其他算法,PSNR(peaksignal-to-noiseratio)为23.69dB,SSIM(structuralsimilarityindex)为0.8283,FID(Fréchetinceptiondistance)为71.53,LPIPS(learnedperceptualimagepatchsimilarity)为0.309),相比指标排名第2的算法,分别提高了0.75dB,0.0197,13.69％,19.86％.定性结果中,本文算法具有更好的复杂退化修复能力,修复的细节更加丰富.此外,本文算法相比对比算法更加轻量,推断速度更快,以43.44M的参数量完成256×256像素分辨率图像推断仅需248ms.结论：本文提出了融合参考先验与生成先验的老照片修复方法,充分利用了参考先验的语义信息与生成模型封装的人像先验,在主观与客观上均取得了先进的修复性能.
作者：刘继鑫陈瑞安仕鹏
作者单位：天津大学微电子学院,天津市成像与感知微电子技术重点实验室,天津300072
母体文献：2022低质图像增强前沿论坛论文集
会议名称：2022低质图像增强前沿论坛
会议时间：2022年4月21日
会议地点：线上
主办单位：中国图象图形学报
语种：chi
分类号：
关键词：老照片 图像修复 参考先验 生成先验
在线出版日期：2022年9月21日
基金项目：
相似文献
相关博文
- 文件大小:
- 18.29 MB
- 下载次数:
- 60
-
高速下载
|
|
