第十三章马尔可夫链第一节第二节上.pdfVIP

第十三章 马尔可夫链 马尔可夫过程是一类特殊的随 机过程, 马尔可夫链是离散状态的 马尔可夫过程,最初是由 数学 家马尔可夫1896 年提出和研究的. 应用十分广泛,其应用领域涉及 计算机,通信,自动控制,随机服务, 可靠性,生物学,经济,管理,教育, 气象,物理,化学等等. 第一节马尔可夫链的定义 一．定义 定义 1 设随机