基于词素的哈萨克语语言模型及其单词切分中的应用

摘要：

本论文中研究了基于词素的哈萨克语语言模型,过往的研究中主要研究了以单词或音节为单位建立语料库形成模型,而本研究中哈萨克语的单词分解为词干和词缀后形成词素,通过得到的词素来建立语言模型,该模型哈萨克语的单词切分,拼写错误检测,语言模型优化等语言处理研究中起了重要的作用,本实验结果表明,该语言模型对哈萨克语单词切分成词干和词缀有明显的效果,切分准确率达到了80％.

关键词：语言模型、词素、语料库、单词切分、哈萨克语

所属期刊栏目：14

分类号：TP18(自动化基础理论)

资助基金：国家自然科学基金项目61462085

在线出版日期：2018-06-19（万方平台首次上网日期，不代表论文的发表时间）

页数：共3页

页码：189-191