基于双生成器生成对抗网络的壁画图像 虚拟修复方法
DOI:
CSTR:
作者:
作者单位:

作者简介:

通讯作者:

中图分类号:

O436

基金项目:

国家自然科学基金面上项目(62372397) 、教育部人文社会科学研究项 目 (规划基金项 目) (21YJAZH002) 、山西省 自然基金面上项 目 (202203021221222) 、山西省文物局 2024年度文物科研课题(2024KT23) 项目资助


The mural image virtual restoration method based on bi-generatorgenerative adversarial network
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    针对现有的基于生成对抗网络的壁画修复方法,其生成样本缺乏多样性,容易造成大规模特征丢失等问题。提出一 种基于双生成器生成对抗网络(BGGAN)的壁画图像虚拟修复方法。首先,从两个随机方向进行样本生成,保证了生成样本 的多样性。其次,对 DilateU-NetKares生成器模型,改进下采样阶段的膨胀卷积扩张率,取消池化操作。最后,设计损失函 数,将均方误差(MSE)损失与对抗损失相结合,通过λG 约束生成样本的特征梯度。在所收集壁画数据集上进行修复测试,测 试结果与多种图像修复方法对比。结果表明,所提算法获得的图像修复结果细节更清晰。修复后图像的峰值信噪比(PSNR) 相较对比模型平均提高了约1.12dB,结构相似度(SSIM)平均提高了约0.047。

    Abstract:

    Aiming atthe existing fresco restoration methods based on generative adversarial networks, their generated samples lack diversity and are prone to large-scale feature loss and other problems. A virtual restoration method for fresco images based on bi-generator generative adversarial network (BGGAN) is proposed. Firstly, sample generation from two random directions ensures the diversity ofgenerated samples. Secondly, forthe Dilate U-NetKares generator model, the inflated convolutional expansion rate in the downsampling stage is improved and the pooling operation is eliminated. Finally, the loss function is designed to combine the MSE loss with the adversarial loss, and the feature gradientofthe generated samples is constrained byλG. Restoration tests are performed on the collected mural dataset, and the testresults are compared with multiple imagerestoration methods. The results show thatthe imagerestoration results obtained by the proposed algorithm have clearer details. The peak signal-to-noise ratio (PSNR) of the restored image is improved byabout1.12dB on averagecompared to thecomparison model, and thestructuralsimilarity(SSIM) is improved by about0.047 on average.

    参考文献
    相似文献
    引证文献
引用本文

杨卓林,曹建芳,张英俊,彭存赫.基于双生成器生成对抗网络的壁画图像 虚拟修复方法[J].国外电子测量技术,2024,43(7):191-200

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:
  • 最后修改日期:
  • 录用日期:
  • 在线发布日期: 2024-08-07
  • 出版日期:
文章二维码