马尔科夫链

Posted lansebandaoti

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了马尔科夫链相关的知识,希望对你有一定的参考价值。

马尔科夫链定义本身比较简单,它假设某一时刻状态转移的概率只依赖于它的前一个状态。举个形象的比喻,假如每天的天气是一个状态的话,那个今天是不是晴天只依赖于昨天的天气,而和前天的天气没有任何关系。当然这么说可能有些武断,但是这样做可以大大简化模型的复杂度,因此马尔科夫链在很多时间序列模型中得到广泛的应用,比如循环神经网络RNN,隐式马尔科夫模型HMM等,当然MCMC也需要它。

以上是关于马尔科夫链的主要内容,如果未能解决你的问题,请参考以下文章

MCMC马尔科夫链

强化学习笔记:马尔科夫链介绍及基于Python的蒙特卡洛仿真

随机过程15 - 离散时间马尔科夫链状态的常返性

随机过程15 - 离散时间马尔科夫链状态的常返性

随机过程15 - 离散时间马尔科夫链状态的常返性

马尔科夫链-蒙特卡罗马尔科夫链-蒙特卡罗方法对先验分布进行抽样