《离散时间马尔科夫链相关应用研究》21000字.docx

PAGE4

离散时间马尔科夫链相关应用研究

摘要

马尔科夫链是概率论一个重要的分支,有着重要的理论意义与实际意义,在理论学习和社会生活中有着非常广泛的应用.本文主要参考《MARKOVCHAIN》一书,以读书报告的形式,介绍离散时间马尔科夫链的相关基础知识.

文章一共分成三个章节,第一章主要介绍马尔科夫链的基本概念,以及马尔可夫性和强马尔科夫性.第二章主要介绍马氏链的状态空间,介绍马氏链的状态分类,并结合具体的例子展现各类状态的含义与性质.最后介绍转移概率的极限形式与马尔科夫链的不变测度,并结合具体例子分析其平稳分布的存在情况.第三章则介绍一个简单的应用,利用前