Formulas are derived for the variance of sample means associated with finite state Markov processes. Results are presented to illustrate the use of the formulas for example processes. The formulas can be used to evaluate proposed statistical methods for estimating the variance of a sample mean obtained from simulation experiments.
机译:通过零方差分布进行抽样的马尔可夫跳跃过程的状态相关自动抽样
机译:有限地平线连续时间马尔可夫决策过程,具有均值和方差标准
机译:有限地平线连续时间马尔可夫决策过程,具有均值和方差标准
机译:基于灵敏度的马尔可夫决策过程的样本路径方差最小化构造方法
机译:用于部分可观察的马尔可夫决策过程的有限内存策略。
机译:具有有限和非有限方差的随机过程
机译:有限水平方差惩罚马尔可夫决策过程