抽样切分卷积实现跨尺度特征融合及内镜图像去模糊

摘要：

针对内镜图像去模糊过程中语义信息难以提取和细节纹理重建困难的问题,设计了一种新的抽样切分卷积,并将其应用于跨尺度特征融合过程中:通过等间隔抽样将大尺度特征无损切分成小尺度特征块,再与小尺度特征进行卷积融合.过程中大尺度特征的所有值都参与了特征融合,避免了细节信息的丢失;未对小尺度特征进行插值,避免了语义信息的模糊.为进一步实现特征互补,设计了特征交互融合模块,先用语义特征激活细节特征,再将两者融合.针对内镜图像亮通道、中间通道和暗通道的特征差异性设计了梯度重建和频域重建损失函数,提升了重建图像的锐度.在EAD和Kvasir-SEG数据集上,该算法的PSNR分别达到32.88 dB和33.01 dB,SSIM分别达到0.972和0.973.实验结果表明,该算法的性能优于主流去模糊算法,视觉上重建图像的纹理更清晰,且未产生伪影.

关键词：内镜图像重建、抽样切分卷积、去模糊、跨尺度特征融合、损失函数

所属期刊栏目：40

分类号：TP391.4(计算技术、计算机技术)

资助基金：国家自然科学基金;四川省科技计划重点研发项目

在线出版日期：2023-05-10（万方平台首次上网日期，不代表论文的发表时间）

页数：共6页

页码：1233-1238