基于图像搜索与合成的图像语义理解

摘要：

图像语义理解是计算机视觉的重要研究领域,对于人工智能的发展具有重大的现实意义,当前大部分的方法在生成多样化的图像语义方面还存在着不足,因此提出了一种基于图像搜索的图像语义合成方法.该方法首先将图像输入搜索引擎以获得相似图像及其携带的描述;其次通过目标检测算法对图像中的目标进行识别以获得图像内目标词及目标框图像;然后计算图像相似度并比较描述文本中的目标词,利用相似度与共有目标词形成度量指标,提取搜索获得的描述文本中最符合原图像语义的文本作为基础文本;最后利用基础文本中缺失的目标词对应的文本与基础文本合成从而获得图像语义.在MSCOCO数据集上的实验结果表明,该方法借助搜索引擎与语义合成可以有效地反映图像语义,相较于其他图像语义理解算法能够更准确地识别图像中的物体,输出更全面的图像语义;对于图像中的内容能够进行更加多样化的描述.

关键词：图像语义理解、图像识别、搜索引擎、图相似计算、语义合成

所属期刊栏目：32

分类号：TP391(计算技术、计算机技术)

资助基金：十三五密码发展基金理论课题MMJJ20180202

在线出版日期：2022-07-04（万方平台首次上网日期，不代表论文的发表时间）

页数：共6页

页码：57-62