基于最大熵方法的统计语言模型

摘要：

针对现有统计语言模型中存在计算量过大和系统负担过重的问题,该文提出了一种基于最大熵方法的统计语言模型.模型在参数估计阶段,引入约束最优化理论中拉格朗日乘数定理和牛顿迭代算法,以确保模型在多个约束条件中可求出最优化参数值;在特征选择阶段,采用计算近似增益的平行算法,解决模型计算量过大和系统开销问题.将该模型用于汉语句子分析的软件实验中表明:模型具有较高的计算效率和鲁棒性.

关键词：自然语言处理统计语言模型最大熵方法

所属期刊栏目：38

分类号：TPL8

资助基金：国防科工委跨行业基金

在线出版日期：2004-01-08（万方平台首次上网日期，不代表论文的发表时间）

页数：共3页

页码：53-55，121