多层次特征融合网络的语义分割算法

摘要：

目标多尺度性质、高层语义信息不足等造成现有算法很难在目标边界取得非常准确的分类精度.为此,提出了一种基于多层次特征融合的语义分割算法.在解码阶段,设计了三个特征提取分支,分别为空间细节分支、语义补充分支和上下文信息分支.空间细节分支采用浅层较高分辨率特征图来生成最终分割图,主要用于保留大量空间细节信息.语义补充分支用于增加更多的高层语义抽象信息.上下文信息分支主要负责提取多尺度全局信息.在语义补充分支中,设计了一种特征融合指导模块(FFGM),建模不同特征图之间像素的对应关系,从而有效地融合不同层次的特征.在空间细节分支中,提出一种自增强特征模块(SEM),对低层次特征进行精调细化,旨在得到清晰的目标边界.在上下文信息分支中,采用金字塔池化模块(PPM)获得多尺度上下文信息,解决目标多尺度性带来的像素错分问题.最后,采用注意力机制融合三个分支提取的特征图,从而强化重要特征,抑制非显著特征.在主流的语义分割数据集PASCAL VOC2012与Cityscapes上,该网络模型获得了81.12％的平均交并比和74.56％的平均交并比,明显优于实验比较算法.

关键词：多层次特征融合、上下文信息、语义分割、空洞卷积、注意力机制

所属期刊栏目：17

分类号：TP391.4(计算技术、计算机技术)

资助基金：国家自然科学基金;国家自然科学基金

在线出版日期：2023-04-10（万方平台首次上网日期，不代表论文的发表时间）

页数：共11页

页码：922-932