并且下一个时间的state只和上一个时间的state有关。
稳定态
想象上述的马尔科夫链,state不停的变化,我们可以求出不同state的概率,也就是state的概率分布。...最简单的办法是列出不同state的概率公式,然后解线性方程组求解,如下:
?...最后,根据z1,z2,z3,...{z^1,z^2,z^3,...}得到P(z)(z=z1,...,zN)P(z) (z = {z_1,...,z_N})的分布。
?...Gibbs Sampling与Markov
吉布斯采样的数据z1,z2,z3,...