湖南大学随机过程实验报告_Markov链.docxVIP

HUNAN UNIVERSITYMarkov链实验报告学生姓名学号专业班级指导老师实验原理实验目标利用matlab软件解markov问题，matlab可以方便的对矩阵进行计算，所以用matlab辅助解markov问题能更为高效便捷。实验设计题目：1、已知齐次马氏链的状态空间,状态转移矩阵为 计算2步转移概率;(2) 已知初始分布为,求的分布律求平稳分布，要求给出程序与结果。我们可以用matlab编写计算方程如下：S0=[2/5 2/5 1/5];P=[1/2 1/3 1/6;1/3 1/3 1/3;1/3 1/2 1/6];S2=S0*P.^2P1=[P-eye(3,3);1 1 1];b=[0 0 0 1];T=P1\bP2=P^2运行结果：S2 = 0.166666666666667 0.138888888888889 0.061111111111111T = 0.400000000000000 0.371428571428571 0.228571428571428P2 = 0.416666666666667 0.361111111111111 0.222222222222222 0.3888888888888890.388888888888889 0.222222222222222 0.388888888888889 0.361111111111111