清华大学 现代通信原理 2012周世东期中答案.pdfVIP

A 卷答案（卷答案 （B 卷可以参考答案的思路）卷可以参考答案的思路） 卷答案卷答案 （（ 卷可以参考答案的思路卷可以参考答案的思路）） 1. 解：解： 解解：： 设随机变量 X 表示任一天下雨与否， Y 表示地面干湿与否。 记X = 0 表示无雨，X = 1表示下雨；Y = 0 表示地面干，Y = 1表示地面湿。 （1）P(X = 0) = 0.5, P(X = 1) = 0.5 1 任一天下雨与否的平均信息量为H(X) = −∑P(X = i)log P(X = i) = 1 i=0 共需要的存储量：100× 365× H (X ) = 4563(字节) 8 1 1 （2 ）PY( = 0) = ∑PY( = 0| X = i) = 0.3; PY( = 1) = ∑PY( = 1| X = i) = 0.7 i=0 i=0 1 任一天地面干湿与否的平均信息量H(Y) = −∑PY( = i)log PY( = i) = 0.8813 i=0 共需要的存储量：100× 365× H(Y) = 4021(字节) 8 （3 ）记联合概率P(X = i,Y = j) = Pi( , j) ，则Pi( , j) = P(X = i)PY( = j | X = i) 由此得：P(0,0) = 0.25, P(0,1) = 0.25, P(1,0) = 0.05, P(1,1) = 0.45 1 1 平均联合信息量为H(XY) = −∑∑Pi( , j)log Pi( , j) = 1.7345 j =0 i =0 共需要的存储量：100× 365× H (XY) = 7914(字节) 8 （4 ）每天中午下雨与否的不确定度由H(X) 衡量，而有地面干湿记录后每天中午下雨 与否还剩下的不确定度由H(X |Y) 衡量，那么每天地面干湿记录提供的关于下雨与否 的信息为：I(X;Y) = H(X ) − H(X |Y) = H(Y) − H(Y | X ) ， 1 1 其中H(Y | X) = −∑P(X = i)∑PY( = j | X = i)log PY( = j | X = i) = 0.7345 i=0 j=0 则I(X;Y) = 0.8813− 0.7345 = 0.1468