10.3969/j.issn.1009-3044.2009.04.095
基于统计的维吾尔文信息熵的估计
信息熵是信息论中用于度量随机变量的不确定性.自然语言信息熵的估计是自然语言信息处理中非常重要而且基本的问题.在试验中,使用统计的方法对250多万词的维吾尔语语料库文本进行统计,初步计算了维吾尔文的信息熵和多余度.所求得的信息熵和多余度分别为4.387比特和13%,相当接近了其它拼音文字的信息熵和多余度.
维吾尔文、信息熵、多余度、语料库、统计
5
TP391.1(计算技术、计算机技术)
国家社科基金项目07xyy019
2009-04-29(万方平台首次上网日期,不代表论文的发表时间)
共3页
1014-1015,1017