全卷积神经结构的段落式图像描述算法

摘要：

针对段落式图像描述生成研究中提升描述语句之间的连贯性问题,提出了一种基于全卷积结构的图像段落描述算法.采用基于卷积网络的区域检测器获取图像表示,结合段落在语言学角度的层次性,构建一种层次性的深度卷积解码器对图像表示解码,自动生成段落式文本描述.同时将门控机制嵌入卷积解码器网络中,以提升模型的记忆能力.实验结果表明,相比于基于循环神经网络等传统段落图像的描述方法,新算法能够为图像生成更为连贯的段落式文本描述,在评测指标上取得较好的结果.

关键词：卷积网络、深度学习、图像描述、连贯性

所属期刊栏目：42

分类号：TN309.2(半导体技术)

资助基金：国家重点研发计划项目;国家自然科学基金项目;国家电网公司总部科技项目

在线出版日期：2020-03-25（万方平台首次上网日期，不代表论文的发表时间）

页数：共7页

页码：155-161