信息论基础试卷及答案.docxVIP

信息论基础试卷及答案

考试时间：______分钟总分：______分姓名：______

一、单项选择题（每题2分，共20分）

1.离散信源熵的最大值条件是（）

A.信源符号等概率分布

B.信源符号概率为1

C.信源符号数量最少

D.信源符号独立

2.信道容量的香农公式适用于（）

A.离散无记忆信道

B.连续信道

C.有记忆信道

D.加性高斯白噪声信道

3.互信息I(X;Y)的物理意义是（）

A.X与Y的相关性

B.X的不确定性减少量

C.Y的不确定性

D.联合熵H(X,Y)

4.平均互信息I(X;Y)与熵H(X)的关系是（）

A.I(X;Y)≤H(X)

B.I(X;Y)≥H(X)

C.I(X;Y)=H(X)

D.I(X;Y)=H(Y)

5.霍夫曼编码的平均码长L满足（）

A.LH(X)

B.L≥H(X)

C.L=H(X)

D.L≤H(X)/R

6.二进制符号‘0’出现概率0.3时的自信息量是（）比特

A.0.3

B.0.7

C.-log2(0.3)

D.log2(0.3)

7.信道编码定理指出，当码率RC时，错误概率