基于双向最大匹配和HMM的分词消歧模型

摘要：

提出一种消减分词切分歧义的模型.利用正向和逆向最大匹配方法对中文文本信息进行分词,基于隐马尔科夫模型对两次最大匹配的分词结果进行对比消歧,得到较为精确的结果.整个过程分为歧义发现、歧义抽取、歧义消除3个过程.测试结果显示,该模型能有效地降低分词歧义引起的错误切分率.

关键词：分词、最大匹配、隐马尔科夫模型、歧义消减

分类号：TP391.1(计算技术、计算机技术)

资助基金：广西教育厅科研项目"基于语意理解的垃圾邮件处理模型研究"项目桂教科研2006[26]号的研究成果之一

在线出版日期：2009-04-03（万方平台首次上网日期，不代表论文的发表时间）

页数：共5页

页码：37-41