马尔可夫变换经典入门教材

POMDP是增强学习的基础,很少见的讲解POMDP的讲义,详细并且清晰,是学习POMDP非常好的参考资料,深入浅出,值得拥有。

隐马尔可夫模型的C++实现，非常好用。包括模型参数的训练和维特比算法。

有限马尔可夫链嵌入方法进展综述，崔利荣，赵先，自20世纪80年代有限MarkovChain嵌入方法发明以来得到了广泛的应用，特别在可靠性领域、模式概率计算和秩序与扫描统计量（Runs&Scans）�

markovkeyboard-通过马尔可夫频率改变键盘布局

使用隐马尔可夫预测天气的小例子python编写注释详细方便计算

马尔可夫随机场是概率论理论的一个分支,在很多应用中都会用到该理论。本书是由Ross Kindermann著,介绍了马尔可夫随机场的理论原理及应用的情况。

北大随机过程课件，马尔可夫过程部分，打包方便大家下载

本文提出了基于隐马尔可夫模型的火焰检测方法。由于火焰闪烁的特性，即火焰尤其是位于火焰边缘的像素可能在1s不断地出现、消失多次，这一现象可以被看成一随机事件，因此可以用马尔可夫模型对其建模。

马尔可夫骨架过程：混杂系统模型 电子书 内容翔实，值得下载

该书是英文版，原书的第三版，讲述了马尔可夫随机场在图像处理中的应用，讲得比较具体，对搞图像处理的有很大的帮助！