多尺度特征复用混合注意力网络的图像重建
目的 针对以往基于深度学习的图像超分辨率重建方法单纯加深网络、上采样信息损失和高频信息重建困难等问题,提出一种基于多尺度特征复用混合注意力网络模型用于图像的超分辨率重建.方法 网络主要由预处理模块、多尺度特征复用混合注意力模块、上采样模块、补偿重建模块和重建模块5部分组成.第1部分是预处理模块,该模块使用一个卷积层来提取浅层特征和扩张特征图的通道数.第2部分是多尺度特征复用混合注意力模块,该模块加入了多路网路、混合注意力机制和长短跳连接,以此来进一步扩大特征图的感受野、提高多尺度特征的复用和加强高频信息的重建.第3部分是上采样模块,该模块使用亚像素方法将特征图上采样到目标图像尺寸.第4部分是补偿重建模块,该模块由卷积层和混合注意力机制组成,用来对经过上采样的特征图进行特征补偿和稳定模型训练.第5部分是重建模块,该模块由一个卷积层组成,用来将特征图的通道数恢复至原来数量,以此得到重建后的高分辨率图像.结果 在同等规模模型的比较中,以峰值信噪比(peak signal-to-noise ratio,PSNR)和结构相似度(structural similarity index measure,SSIM)作为评价指标来评价算法性能,在Set5、Set14、BSD100(Berkeley segmentation dataset)和Urban100的基准测试集上进行测试.当缩放尺度因子为3时,各测试集上的PSNR/SSIM依次为34.40 dB/0.9273,30.35 dB/0.8427,29.11 dB/0.8052和28.23 dB/0.8540,相比其他模型有一定提升.结论 量化和视觉的实验结果表明,本文模型重建得到的高分辨率图像不仅在重建边缘和纹理信息有很好的改善,而且在PSNR和SSIM客观评价指标上也有一定的提高.
超分辨率重建;多尺度特征复用;混合注意力;特征补偿;边缘
26
TP391(计算技术、计算机技术)
国家自然科学基金项目61703278,61772342
2021-11-24（万方平台首次上网日期，不代表论文的发表时间）
共14页
2645-2658
