突然有一个想法：把平时学习中遇到的问题以及为此搜到的资料写成博客，即可以帮助自己记忆，也可以供网友们参考，何乐而不为呢。下面从马尔科夫链的问题开始。

   马尔可夫链，因俄罗斯数学家安德烈·马尔可夫（俄语：Андрей Андреевич Марков）得名，是数学中具有马尔可夫性质的离散时间随机过程。该过程中，在给定当前知识或信息的情况下，只有当前的状态用来预测将来，过去（即当前以前的历史状态）对于预测将来（即当前以后的未来状态）是无关的。在马尔可夫链的每一步，系统根据概率分布，可以从一个状态变到另一个状态,也可以保持当前状态。状态的改变叫做过渡，与不同的状态改变相关的概率叫做过渡概率。随机漫步就是马尔可夫链的例子。随机漫步中每一步的状态是在图形中的点，每一步可以移动到任何一个相邻的点，在这里移动到每一个点的概率都是相同的(无论之前漫步路径是如何的)。

马尔可夫链是随机变量的一个数列。这些变量的范围，即他们所有可能取值的集合，被称为“状态空间”，而的值则是在时间的状态。如果对于过去状态的条件概率分布仅是的一个函数，则

这里为过程中的某个状态。上面这个恒等式可以被看作是马尔可夫性质。

以上内容来自：http://zh.wikipedia.org/wiki/%E9%A9%AC%E5%B0%94%E5%8F%AF%E5%A4%AB%E9%93%BE

概率、随机变量与随机过程（第4版）（国外名校最新教材精选）

• 作 者：（美）帕普里斯，（美）佩莱　著，保铮，冯大政　等译

• 出 版 社：西安交通大学出版社

• 出版时间：2012-8-1

• 版 次：2页 数：686字 数：1106000

• 印刷时间：2012-8-1开 本：16开纸 张：胶版纸

• 印 次：3I S B N：9787560544588包 装：平装

 A·帕普里斯、S·U·佩莱编著的《概率、随机变量与随机过程》是美国著名学者A·帕普里斯教授所著的一本经典教材。自1965第1版问世以来至今已第4版，一直被美国多所大学用作相关专业的研究生教材。它的特点是将高深的理论恰当地应用于工程实际，因而深受工程界专业人士的青睐。本书（第4版）在保持前三版风格和精华的基础上作了大量的修订：更新了约三分之一的章节内容，包括几个新的专题和新增的第15、16章；增加了大量的新例子，进一步澄清了一些复杂的概念，使读者能更容易地理解它们。《概率、随机变量与随机过程》可供无线电通信系统、信号处理、控制理论、优化、滤波等专业的研究生和本科高年级学生使用，也可供相关领域的科研人员和工程技术人员参考。

Pattern Recognition And Machine Learning

模式识别和机器学习的优秀教材，可惜没有中文版，所以也不介绍 ，如有需要者请执行搜索。

http://probweb.berkeley.edu/probweb.html一个有关概率的学习链接，资料非常多。

其他的一些国内的课程课件什么的，百度文库里面有，举一例：

http://wenku.baidu.com/view/4c29ce2a3169a4517723a37d.html

另外，刘未鹏网友 帖子，这里给出链接，供参考

『只读经典』机器学习与人工智能书籍资源导引

​http://book.douban.com/doulist/176513/

转载本文请联系原作者获取授权，同时请注明本文来自马小洪科学网博客。
链接地址：https://blog.sciencenet.cn/blog-560320-714691.html


下一篇：win7和ubuntu13.10的grub引导问题