基于渐进式特征推理的裂缝图像修复方法研究
DOI:
CSTR:
作者:
作者单位:

(陕西师范大学 计算机科学学院, 陕西 西安 710000)

作者简介:

李良福(1977-),男,江西人,博士,教授,硕士生导师, 主要从事计算机视觉方面、图像处理、人工智能等方面的研究.

通讯作者:

中图分类号:

基金项目:

国家自然科学基金(61573232,61401263)和陕西省自然科学基金(2022JM335)资助项目 (陕西师范大学 计算机科学学院, 陕西 西安 710000)


Research on crack image inpainting method based on progressive feature reasoning
Author:
Affiliation:

(College of Computer and Science, Shaanxi Normal University, Xi′an,Shaanxi 710000, China)

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    图像修复是计算机图形学与计算机视觉中的研 究热点之一。针对传统裂缝图像修复 采用一次性补全修复方法并没有语义理解能力,当语义场景较为复杂且图像缺陷较大时 修复效果不佳的问题,提出了一种基于渐进式特征推理的裂缝图像修复方法。该方法从孔洞 边缘逐步修复图像,加强对孔洞中心的约束。首先通过计算掩膜占比确定修复比例,使用部 分卷积更新掩膜,然后利用VGG-16网络进行特征提取,再使用语义注意力机制,生成高质 量的图像特征,并采用跳跃连接方法,增强遥远距离的梯度相关性,为后续图像修复提供多 尺度多层次的特征信息。最后,将递归生成的特征图进行融合解码生成修复图像。实验结果 表明,与传统图像修复方法相比,本方法修复的裂缝图像峰值信噪比提升了0.5 dB—1.2 dB,产生语义明确的修复结果。

    Abstract:

    Image inpainting is one of an activate resear ch topic in the domain of computer vision and computer graphics.Aiming at the pr oblem that the traditional crack image restoration method using one-time completion restoration method does not have the ability t o understand semantics,and the repair effect is not good when the semantic scene is more complex and the image defect is large,a crack image restoration based on progre ssive feature reasoning is proposed.This method gradually restores the image from the hole edge and strengthens the constraint on the hole center.At first,partial convolution i s used to update the mask,and the update ratio is determined by calculating the mask prop ortion. Then,use the VGG-16network for feature extraction,semantic attention mechanism is used to generate high-quality image features,and use the jump connection metho d to enhance the gradient correlation of remote distances,so as to provide multi-sc ale and multilevel feature information for subsequent image restoration.Finally,the recursive featu re map is fused and decoded to generate a repair image.The experimental results show that the proposed method,compared with traditional image inpainting methods,can improved the peak signal-to-noise ratio of the crack image repaired for 0.5dB—1.2dB and produce seman tic clear inpainting results.

    参考文献
    相似文献
    引证文献
引用本文

李良福,黎光耀,王楠,张晰.基于渐进式特征推理的裂缝图像修复方法研究[J].光电子激光,2022,33(4):393~402

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2021-07-25
  • 最后修改日期:
  • 录用日期:
  • 在线发布日期: 2022-06-15
  • 出版日期:
文章二维码