基于多层注意力机制的回指消解算法

摘要：

在信息抽取过程中,无法被判别的回指易造成信息抽取不完整的情况,这种指代关系可通过分析当前语境下的指代部分、被指代部分、周围的信息及原文内容生成的唯一判别信息进行判断.为此,构建一个多层注意力机制模型,在不同层次上对上述信息进行基于注意力机制的概率计算,利用最终结果判别回指关系是否成立.在指代部分与被指代部分向量化后,通过2个注意力层上的4次概率计算,使每一个训练结果在判别之前都具有唯一性.在OntoNotes 5.0数据集上的实验结果表明,该模型F值在显性指代和零指代均存在的条件下为70.1％,在存在零指代的条件下为60.7％,高于尹庆宇等人提出的模型.

关键词：指代关系、注意力机制、显性指代、零指代、多层注意力机制模型

所属期刊栏目：46

分类号：TP18(自动化基础理论)

资助基金：国土资源部大数据科研专项201511079-3

在线出版日期：2020-04-22（万方平台首次上网日期，不代表论文的发表时间）

页数：共7页

页码：59-64,71