第三章_道容量-习题答案.docVIP

3.1 设信源通过一干扰信道，接收符号为Y = { y1, y2 }，信道转移矩阵为，求： (1) 信源X中事件x1和事件x2分别包含的自信息量； (2) 收到消息yj (j=1,2)后，获得的关于xi (i=1,2)的信息量； (3) 信源X和信宿Y的信息熵； (4) 信道疑义度H(X/Y)和噪声熵H(Y/X)； (5) 接收到信息Y后获得的平均互信息量。 解： 1) 2) 3) 4) 5) 3.2 设二元对称信道的传递矩阵为 (1) 若P(0) = 3/4, P(1) = 1/4，求H(X), H(X/Y), H(Y/X)和I(X;Y)； (2) 求该信道的信道容量及其达到信道容量时的输入概率分布； 解： 1) 2) 3.3 设有一批电阻，按阻值分70%是2KΩ，30%是5 KΩ；按瓦分64%是0.125W，其余是0.25W。现已知2 KΩ阻值的电阻中80%是0.125W，问通过测量阻值可以得到的关于瓦数的平均信息量是多少？ 解： 对本题建立数学模型如下： 以下是求解过程： 3.4 若X, Y, Z是三个随机变量，试证明 (1) I(X;YZ) = I(X;Y) + I(X;Z/Y) = I(X;Z) + I(X;Y/Z)； 证明： (2) I(X;Y/Z) = I(Y;X/Z) = H(X/Z) – H(X/YZ)； 证明： (3) I(X;Y/Z) ≥0，当且仅当(X