汉语文本自动分词算法的研究

摘要：

分析了中文分词词典的机制,提出了一种改进的整词分词字典结构,并针对机械分词算法的特点,将其与概率算法相结合,探讨了一种中文自动分词概率算法.采用哈希及二分法对词典进行分词匹配.实验表明,该算法具有较高的分词效率和准确率,对于消去歧义词也有较好的性能.

关键词：自动分词、分词算法、字典、歧义切分

所属期刊栏目：46

分类号：TP391(计算技术、计算机技术)

资助基金：发展基金资助项目

在线出版日期：2010-03-26（万方平台首次上网日期，不代表论文的发表时间）

页数：共4页

页码：125-127,130