一种基于互信息的串扫描中文文本分词方法

摘要：

中文分词技术是中文信息处理的基础环节,在互信息原理的基础上提出了一个基于统计的中文文本分词方法.该方法对经过预处理之后每一个串中的任意可能长度串均判断其成词的可能性,实验结果说明该算法简单且具有良好的精度及查全率.

关键词：中文分词、词频、互信息

所属期刊栏目：29

分类号：TP391(计算技术、计算机技术)

在线出版日期：2010-09-25（万方平台首次上网日期，不代表论文的发表时间）

页数：共3页

页码：161-162,172