第42卷第4期2023年8月山东科技大学学报(自然科学版)JournalofShandongUniversityofScienceandTechnology(NaturalScience)Vol.42No.4Aug.2023DOI:10.16452/j.cnki.sdkjzk.2023.04.012文章编号:1672-3767(2023)04-0101-12基于循环生成对抗网络的壁画色彩修复算法曹建芳1,2,靳梦燕1,李朝霞2,陈泽宇1,马尚1(1.太原科技大学计算机科学与技术学院,山西太原030024;2.忻州师范学院计算机系,山西忻州034000)摘要:针对敦煌唐代壁画修复所面临的褪、变色以及修复后的壁画图像色彩存在假色和伪影的问题,提出基于循环生成对抗网络和多尺度融合协调注意力机制的壁画色彩修复算法。首先在循环一致性损失中添加同一映射损失,然后改进协调注意力机制,提出多尺度融合的协调注意力机制,最后在生成器中引入多尺度融合的协调注意力机制,对图像进行卷积核大小为1×1、3×3、5×5、7×7的多尺度卷积运算,提高生成图像的协调性。实验结果表明,与CycleGAN、WGAN等经典算法相比,本文算法在构造的壁画数据集上精度更高,可以在不依赖专家知识的情况下修复褪色壁画图像的颜色。关键词:循环生成对抗网络;风格迁移;壁画色彩修复;同一映射损失;协调注意力机制中图分类号:TP391.41文献标志码:A收稿日期:2022-01-31基金项目:教育部人文社会科学研究项目(21YJAZH002);山西省高等学校人文社会科学重点研究基地项目(20190130)作者简介:曹建芳(1976—),女,山西忻州人,教授,博士,主要从事数字图像理解研究.E-mail:kcxdj122@126.com靳梦燕(1998—),女,河南南阳人,硕士研究生,主要从事古代壁画数字化研究.MuralcolorrestorationalgorithmbasedoncyclicgenerativeadversarialnetworkCAOJianfang1,2,JINMengyan1,LIZhaoxia2,CHENZeyu1,MAShang1(1.CollegeofComputerScienceandTechnology,TaiyuanUniversityofScienceandTechnology,Taiyuan030024,China;2.DepartmentofComputerScienceandTechnology,XinzhouNormalUniversity,Xinzhou034000,China)Abstract:Aimingattheproblemsoffading,discolorationandfalsecolorandartifactsintherestoredmuralimagesinDunhuangmuralsintheTangDynasty,amuralcolorrestorationalgorithmbasedoncyclicgenerativeadversarialnetworkandmulti-scalefusioncoordinatedattentionmechanismwasproposed.First,thesamemappinglosswasaddedtothecycleconsistencyloss.Then,thecoordinatedattentionmechanismwasimprovedandacoordinatedat-tentionmechanismofmulti-scal...
