《信息论与编码》 课后习题答案 第3章 .pdf

3-11）

（2）无噪有损信道1

（3）信道容量

1

CmaxI(X;Y)

P

X

max[H(Y)H(Y/X)1

P

X

maxH（Y）

P

X

log3bit/s1

3-3

解答：

信道容量C1+0.98log20.98+0.02log20.020.8586bit/信道符号

则每秒钟可传送的信息量为：1500×0.85861287.9bit

10秒钟最大可传送的信息量为12879bit，而待传送的信息量为14000bit,因此，

10秒钟内不能无失真的传送完毕。

3-5

解答：

xx1x2

1

（）信源

px0.60.4



x1

所以事件含有的自信息

IxlogPxlog0.60.737bit



1212

事件x2含有的自信息

IxlogPxlog0.41.32bit



2222

由此可见，概率越小的事件含有的自信息越大。

（2）根据题意计算知Ix;yi1,2;j1,2,由图可得

ij

51

Py1|x1Py2|x1

66

31

Py1|x2Py2|x2

44

互信息的公式为

Pxi|yjPyj|xii1,2;j1,2

Ix;yloglog

ijPxPy



ij

PyPxPy|x

而j1,2

j