马尔柯夫决策模型探讨

摘要：

讨论了随机性决策问题,在此类问题中,系统的状态概率是不断变化的.马尔可夫过程的基本思想是根据当前状态的概率分布来推断未来状态的分布,并以此做出判断和决策；讨论了遍历马尔柯夫链的瞬态行为,要完成瞬态行为需要求出其基本方程组,为此必须用到z变换分析方法.Z变换可将差分方程转化为对应的普遍方程,一个非负离散的时间函数f(n)的z变换为f(z)=∞∑n=0 f(n)zn,函数变换是一一对应的,同时,原函数f(n)与其z变换间可以相互转化.

关键词：马尔柯夫链、决策问题、策略问题、随机过程、状态概率、转移概率

所属期刊栏目：24

分类号：O226(运筹学)

在线出版日期：2012-03-16（万方平台首次上网日期，不代表论文的发表时间）

页数：共3页

页码：29-31