可列非齐次马氏链二元泛函的强大数定律

本文研究可列非齐次马氏链二元泛函的强大数定律，并利用这个结果研究可列非齐次马氏链Shannon－McMillan定理．     

单无限马氏环境下可列齐次马氏链的一类强偏差定理

本文研究了单无限马氏环境下可列齐次马氏链的一类强偏差定理.首先给出了单无限马氏环境下马氏链的定义和渐近对数似然比的概念,利用构造非负鞅的方法,获得了单无限马氏环境下可列齐次马氏链的强偏差定理,以及单无限马氏环境下可列齐次马氏链的强大数定律和Shannon-McMillan定理.     

关于可列非齐次马氏链Cesaro平均收敛性及二元函数的强大数定律

该文的目的是要研究可列非齐次马氏链的Cesaro平均收敛性及二元函数的强大数定律.并利用这两者研究可列非齐次马氏链的Shannon-Mcmillan定理.     

任意齐次树指标马氏链场的一类Shannon-Mcmillan定理

采用构造相容分布与非负上鞅的方法来研究任意齐次树指标可列非齐次马氏链场的相对熵密度的一类强极限定理,并由此得出若干齐次树指标有限状态非齐次马氏链场、一般非齐次马氏链的Shannon-Mcmillan定理.将已有的关于离散信源的结果加以推广.     

可列非齐次马氏链的强极限性质

本文主要研究可列状态非齐次马氏链的强极限性质.文中在Cesaro收敛条件下证明了非齐次马氏链的N+1元函数的一系列强极限性质,推广了已有的关于二元随机变量函数的类似结果.最后,作为推论给出了齐次马氏链的N+1元函数的强极限定理.     

可列非齐次马氏链的一个强极限定理

本文提出可列非齐次马氏链关于状态出现频率的一个强权限定理．     

非齐次马氏链的中心极限定理

本文将针对非齐次马氏链的转移矩阵列在Ces`aro收敛意义下,利用鞅的中心极限定理证明一个不同于Dobrushin结果的非齐次马氏链的中心极限定理。     

一类强极限定理

本文给出了一类对任意可列非齐次马氏链普遍成立的强极限定理。     

一类强极限定理

本给出了一类对任意可列非齐次马氏链普遍成立的强极限定理。     

一类新形式的强极限定理

本文给出了一类对任意可列非齐次马氏链普遍成立的新形式的强极限定理 .     

一类非齐次树上的非齐次马尔可夫链的若干强极限定理

极限定理一直是国际概率论界研究的中心课题之一.通过构造适当的辅助非负鞅而给出了一类特殊非齐次树上可列状态的非齐次马尔可夫链场的若干强极限定理.     

一类特殊非齐次树上非齐次马尔可夫链的强律

极限定理一直是国际概率论界研究的中心课题之一.本文通过构造适当的辅助非负鞅而给出了一类特殊非齐次树上可列非齐次马尔可夫链场的若干强律.     

非时齐部分可观察Markov决策规划的最优策略问题

本文讨论了一类非时齐部分可观察Markov决策模型．在不改变状态空间可列性的条件下，把该模型转化为[5]中的一般化折扣模型，从而解决了其最优策略问题，并且得到了该模型的有限阶段逼近算法，其中该算法涉及的状态是可列的．     

关于可列非齐次马尔可夫链的一个强极限定理及其推广

给出关于可列非齐次马尔可夫链M元状态序组出现频率的一个新形式的强极限定理及其推广,所得结论对任意可列非齐次马尔可夫链普遍成立.     

一个随机偏差定理

设{Xn,n≥0}是可列非齐次马尔可夫链,Sn(i0,i1,…,im-1,ω)表示m元状态序组(i0,i1,…,im-1)在序列(X0,X1,…,Xm-1),(X1,X2,…,Xm),…,(Xn-1,Xn,…,Xn+m-2)中出现的次数.本文给出了关于Sn(i0,i1,…,im-1,ω)的一个对任意可列非齐次马尔可夫链普遍成立的随机偏差定理,即用不等式表示的一个强极限定理.     

关于极限定理的一个结果及其推广

给出了一个关于可列非齐次马尔可夫链M元状态序组出现频率的一个强极限定理及其推广,所得结论对任意可列非齐次马尔可夫链普遍成立.     

一个关于马尔可夫链的极限定理

给出一个关于可列非齐次马尔可夫链M元状态序组出现频率的新形式的强极限定理,所得结论对任意可列非齐次马尔可夫链普遍成立.     

一个随机偏差定理

设{Xn，n≥0}是可列非齐次马尔可夫链，Sn（i0，i1，…，im-1，ω）表示m元状态序组（i0，i1，…，im-1）在序列（X0，X1，…，Xm-1），（X1，X2，…，Xm），…，（Xn-1，Xn，…，Xn＋m-2）中出现的次数.本文给出了关于Sn（i0，i1，…，im-1，ω）的一个对任意可列非齐次马尔可夫链普遍成立的随机偏差定理，即用不等式表示的一个强极限定理.     

渐近循环马氏链的收敛速度

引入了渐近循环马氏链的概念,它是循环马氏链概念的推广.首先研究了在强遍历的条件下,可列循环马氏链的收敛速度,作为主要结论给出了当满足不同条件时可列渐近循环马氏链的C-强遍历性,一致C-强遍历性和一致C-强遍历的收敛速度