《信息论和编码》习题集.docVIP

第二章习题： 补充题：掷色子，（1）若各面出现概率相同 （2）若各面出现概率与点数成正比 试求该信源的数学模型 解： （1）根据，且，得 ，所以信源概率空间为 （2）根据，且，得。 2-2 由符号集组成的二阶马尔可夫链，其转移概率为P(0/00)=0.8，P(0/11)=0.2，P(1/00)=0.2， P(1/11)=0.8，P(0/01)=0.5，P(0/10)=0.5，P(1/01)=0.5，P(1/10)=0.5。画出状态图，并计算各状态的稳态概率。 解：由二阶马氏链的符号转移概率可得二阶马氏链的状态转移概率为： P(00/00)=0.8 P(10/11)=0.2 P(01/00)=0.2 P(11/11)=0.8 P(10/01)=0.5 P(00/10)=0.5 P(11/01)=0.5 P(01/10)=0.5 二进制二阶马氏链的状态集S={}={00，01，10，11} 状态转移图 各状态稳定概率计算：即 得： 即：P(00)=P(11)= P(01)=P(10)= 2-6掷两粒骰子，当其向上的面的小圆点数之和是3时，该消息所包含的信息量是多少？当小圆点数之和是7时，该消息所包含的信息量又是