2026年互年期中测试题及答案.docVIP

2026年互年期中测试题及答案

一、填空题（每题2分，共20分）

1.在互信息理论中，互信息的计算公式为_______。

2.互信息是衡量两个随机变量之间_______的指标。

3.互信息具有非负性，即对于任意两个随机变量X和Y，互信息I(X;Y)的值满足_______。

4.当两个随机变量X和Y相互独立时，互信息I(X;Y)的值为_______。

5.互信息的单位是_______。

6.在信息论中，熵是用来衡量一个随机变量的_______。

7.熵的公式为_______。

8.条件熵H(Y|X)表示在已知随机变量X的条件下，随机变量Y的不确定性。

9.互信息I(X;Y)可以表示为H(X)与H(Y|X)的差，即I(X;Y)=_______。

10.互信息在信息压缩和编码中具有重要的应用，例如在_______中。

二、判断题（每题2分，共20分）

1.互信息总是非负的。（）

2.互信息可以用来衡量两个随机变量之间的线性关系。（）

3.当两个随机变量完全相关时，互信息达到最大值。（）

4.互信息在信息论中是一个重要的概念，但它在实际应用中并不重要。（）

5.互信息的值越大，表示两个随机变量之间的相关性越强。（）

6.熵是一个非负的值，且它的值越大表示随机变量的不确定性越大。（）

7.条件熵H(Y|X