中文分词关键技术研究

摘要：

中文信息处理对于人们日常生活中获取信息起着举足轻重的作用,是信息检索和搜索引擎必不可少的基础性工作.现有的中文分词方法有很多,它们以字符串匹配、统计模型、理解、路径以及语义等为基础,并辅以分词词典和规则库,能够在一定程度上对中文信息进行切分.分词结果一般符合逻辑,符合日常生活中语言表达规范.因此,能很好被人们所理解运用,但由于汉语本身的特殊性和复杂性,中文分词面临许多难点,目前的中文分词技术普遍存在歧义词处理和未登录词(新词)识别2个难点.因此,一个性能良好的中文分词方法不但需要具备高效的分词算法和词典机制,而且要准确识别歧义词和未登录词.本文对搜索引擎的中文分词技术进行研究,具有一定的理论价值和实际意义.

关键词：中文分词、关键技术、研究

分类号：TP3;G35

在线出版日期：2018-01-12（万方平台首次上网日期，不代表论文的发表时间）

页数：共2页

页码：54-55