文档名:基于双阶段多尺度生成对抗网络的图像复原方法
摘要:针对人脸图像复原任务中对图像尺度信息利用不足和眼镜结构复原错误的问题,提出一种基于双阶段多尺度生成对抗网络复原模型.该模型第1阶段引入改进损失的U-Net粗重构网络,利用跳连接减少原始图像信息的丢失,融合3种不同的损失函数提高生成器的重构能力,采用双判别器考虑全局信息和局部信息,并提出一种混合域注意力机制用于关注图像的空间和通道信息.第2阶段的精修复网络构建了全新的特征增强模块,增强网络对细节信息的提取能力和对结构的表达能力,引入相对判别器,用于关注生成样本与真实样本之间的相对真实性,提高了生成质量和训练稳定性.实验结果表明,该方法能够复原各类图像缺失的情况,并能够有效复原佩戴眼镜的人脸图像,与其他方法相比,该方法的峰值信噪比、结构相似性和感知相似度评估等指标分别提升了3.81%、2.65%和0.45%.
Abstract:Tosolvetheproblemofinsufficientuseofimagescaleinformationandincorrectreconstructionofglassesstructureinfaceimagerestorationtask,atwo-stagemulti-scalegenerativeadversarialnetworkrestorationmodelisproposed.Inthefirststageofthemodel,U-Netcoarsereconstructionnetworkwithimprovedlossisintroduced,threedifferentlossfunctionsarefusedtoimprovethereconstructionabilityofthegenerator,doublediscriminatorisusedtoconsidertheglobalinformationandlocalinformation,andamixeddomainattentionmechanismisproposedtofocusonthespatialandchannelinformationoftheimage.Inthesecondstage,anewfeatureenhancementmoduleisconstructedtoenhancethenetwork'sabilitytoextractdetailsandexpressstructures.Theexperimentalresultsshowthatthismethodcanrecoverallkindsofmissingimagesandeffectivelyrestorefaceimageswearingglasses.Thepeaksignal-to-noiseratio,structuralsimilarityandperceivedsimilarityevaluationindexesofthemethodwereimprovedby3.81%,2.65%and0.45%,respectively.
作者:童俊毅 张银胜 张培琰 李长帅 孟祥源 单慧琳 Author:TongJunyi ZhangYinsheng ZhangPeiyan LiChangshuai MengXiangyuan ShanHuilin
作者单位:南京信息工程大学电子与信息工程学院南京210044无锡学院电子信息工程学院无锡214105
刊名:国外电子测量技术 ISTIC
Journal:ForeignElectronicMeasurementTechnology
年,卷(期):2024, 43(6)
分类号:TP391.4
关键词:图像复原 生成对抗网络 特征增强 双阶段 U-Net
Keywords:imagerestoration generateadversarialnetwork featureenhancement two-stage U-Net
机标分类号:TP391.41TN911.73TP751
在线出版日期:2024年7月12日
基金项目:国家自然科学基金,江苏省研究生创新项目基于双阶段多尺度生成对抗网络的图像复原方法[
期刊论文] 国外电子测量技术--2024, 43(6)童俊毅 张银胜 张培琰 李长帅 孟祥源 单慧琳针对人脸图像复原任务中对图像尺度信息利用不足和眼镜结构复原错误的问题,提出一种基于双阶段多尺度生成对抗网络复原模型.该模型第1阶段引入改进损失的U-Net粗重构网络,利用跳连接减少原始图像信息的丢失,融合3种不同...参考文献和引证文献
参考文献
引证文献
本文读者也读过
相似文献
相关博文
基于双阶段多尺度生成对抗网络的图像复原方法 Image restoration method based on two-stage multi-scale generative adversarial network
基于双阶段多尺度生成对抗网络的图像复原方法.pdf
- 文件大小:
- 11.55 MB
- 下载次数:
- 60
-
高速下载
|
|