语言先验知识对神经网络模型自然语言处理任务的影响

摘要：

随着互联网的发展及硬件的更新,神经网络模型被广泛应用于自然语言处理、图像识别等领域.目前,结合传统自然语言处理方法和神经网络模型正日益成为研究的热点.引入先验知识代表了传统方法的惯例,然而它们对基于神经网络模型的自然语言处理任务的影响尚不清楚.鉴于此,该文尝试探究语言层先验知识对基于神经网络模型的若干自然语言处理任务的影响.根据不同任务的特点,比较了不同先验知识和不同输入位置对不同神经网络模型的影响.通过大量的对比实验发现:先验知识并不是对所有任务都适用,在神经网络模型的合适位置加入合适的先验知识方可加快模型的收敛速度,提高相关任务的效果.

关键词：神经网络、自然语言处理、先验知识

所属期刊栏目：31

分类号：TP391(计算技术、计算机技术)

资助基金：国家自然科学基金青年基金61402191;华中师范大学中央高校基本科研业务费教育科学专项资助项目CC-NU16JYKX15;国家语委科研项目WT135-11

在线出版日期：2018-06-01（万方平台首次上网日期，不代表论文的发表时间）

页数：共8页

页码：10-17