论文部分内容阅读
讨论了随机性决策问题,在此类问题中,系统的状态概率是不断变化的。马尔可夫过程的基本思想是根据当前状态的概率分布来推断未来状态的分布,并以此做出判断和决策;讨论了遍历马尔柯夫链的瞬态行为,要完成瞬态行为需要求出其基本方程组,为此必须用到z变换分析方法。Z变换可将差分方程转化为对应的普遍方程,一个非负离散的时间函数f(n)的z变换为f(z)=∞