语义融合的革命文物图像以文标图算法研究

摘要：

革命文物蕴含着丰富的红色文化和光荣历史,具有重要的研究价值和传承意义.但目前对革命文物的梳理和解读仍缺乏数字化的方法.基于革命文物的多模态数据组织形式,本文提出了一种全新的面向革命文物图文数据的领域化、标签化和结构化方法——"以文标图",对革命文物进行数字化标注.针对革命文物图像标签化问题,构建多模态语义融合模型提取图像标签,使用多特征TF-IWF方法提取文本标签,最后基于标签语义相似度对标签重排序,得到图像相关性高、信息粒度细的图像标签.针对革命文物图文数据结构化,构建图文模态融合模型帮助数据结构化,并将传统的基于序列标注的命名实体识别方法转化为属性名预测和属性值预测两部分.本文算法实现了图文模态的语义信息互补,提高了图文数据标签化和结构化的效果,为革命文物信息标注和解读提供了技术路径.

关键词：革命文物、多模态语义融合、关键词提取、命名实体识别

所属期刊栏目：29

分类号：TP391(计算技术、计算机技术)

资助基金：揭榜挂帅重点研发课题2021YFF0901701

在线出版日期：2022-09-20（万方平台首次上网日期，不代表论文的发表时间）

页数：共8页

页码：26-32,49