- 1、本文档共4页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
马氏过程及Q矩阵概述
马氏过程及Q矩阵
姓名:许丹妮
学号:3100803113
班级:金融101
马氏过程
1 产生背景
在确定性现象的研究中,用函数描述研究对象的变化规律,这个函数往往是某组微分方程(或偏微分方程)的解。因此,如果已知函数的初始值(或加上边值条件)和方程,这个函数便完全确定。此事实反映许多自然现象所共有的一种性质:已知研究对象现在的 情况,对象将来的变化情况与它过去的行为无关。称此现象为无后效性。
在随机现象的研究中,用随机过程描述研究对象的变化规律。大量的资料表明,许多随机现象也具有无后效性,只是这时的无后效性带有统计色彩。它可表示为:给定随机过程 ,若对于参数集中任意有,和任意的,
成立,那么称过程具有无后效性 。即是说,已知过程时的情况,预言后事件的概率与过程在前的行为无关。由于马尔科夫最先研究这类过程,故称这类过程为马尔科夫过程,称无后效性为马尔科夫性。
2 概念及定义
马尔科夫过程按其状态和时间参数是连续的或离散的,可分为三类:
时间、状态都是离散的马尔科夫过程,称为马尔科夫链。
时间连续、状态离散的马尔科夫过程,称为连续时间的马尔科夫链。
时间、状态都连续的马尔科夫过程。
假设马尔科夫过程的参数集是离散的时间集合,即,其相应可能取值的全体组成的状态空间是离散的状态集
定义1 设有随机过程,若对于任意的整数和任意的,条件概率满足:
则称为马尔科夫链。
连续时间的马尔科夫链
定义2 设随机过程,状态空间。若对任意及,有
则称为连续时间马尔科夫链。
3 应用
经典应用在概率方面,马尔科夫链主要应用排队论、存储模型和更新模型方面。再者是应用于网络流量分析和计算机系统建模方面,例如在无线局域网载波侦听与碰撞避免协议分析中就采用了二维马尔科夫模型。
马尔科夫链研究与应用领域还可以是时间序列分析,它不但可以处理AR模型,而且可以处理一些非线性模型。此时,将传统的一维状态空间描述转化为向量空间描述。
在马尔科夫链应用方面另一个快速发展的理论是马尔科夫链的计算机仿真算法理论,如Gibbs抽样、Metropolis-Hastings算法以及更一般性的Markov Monte Carlo 方法等。
Markov链在研究质点的随机运动、自动控制、通信技术、生物工程、经济管理等领域都有着广泛的应用。
Q矩阵
1 背景
对于离散时间齐次马尔科夫链,如果已知其一步转移概率矩阵则步转移矩阵由一步转移概率矩阵的次方即可求得。但是,对于连续时间齐次马尔科夫链,其转移概率就可由Q矩阵决定并求得。以Q为密度矩阵的广义转移矩阵称为Q过程。在一定条件下,Q广义转移矩阵,满足向后微分方程组合向前微分方程组。这两个方程组的更普遍形式由克尔莫格罗夫于1931年引入,他并提出求解上述方程组的问题:给定一个矩阵满足,是否存在Q广义转移矩阵?如果存在,何时唯一?如果不唯一,如何求出全部的Q广义转移矩阵?
对于都有限的情形,W.费勒于1940年构造了一个最小解,证明了总是存在的;中国学者侯振挺与1974年对于都有限的情形找到了的惟一性准则,至于求出全部Q广义转移矩阵的问题,仅仅对一些特殊的情形获得解决。
2 概念及应用
设是齐次马尔科夫过程的转移概率,那么存在极限
我们称为齐次马尔科夫过程从状态到状态的转移速率。
若连续时间齐次马尔科夫链是具有有限状态空间,则其转移速率可构成以下形式的矩阵:
对于连续时间齐次马尔科夫链,其转移概率不再是简单可求得的,它可能是时间的函数,这时可以通过其转移速率Q矩阵求得。
三、文献
1 《随机过程理论与应用》樊平毅著.
2 《随机过程及其应用》刘次华著.
3 《随机过程理论与应用》熊大国著.
1
文档评论(0)