沈阳航空航天大学2009-2010学年2学期.pdfVIP

试题编号： 沈阳航空航天大学 2009-2010 学年 2 学期 《信息论与编码》试卷（期末）（B卷） 题 号 一 二 三 四 五 六 七 八 九 总 分 得 分 评卷人 一、填空题（共 15 分，每空 1 分） 1、若一连续消息通过某放大器，该放大器输出的最大瞬时电压为 b，最小瞬时电压为 a。 若消息从放大器中输出，则该信源的绝对熵是 ；其能在每个自由 度熵的最大熵是 。 2、高斯白噪声信道是指 。 3、若连续信源的平均功率为５ W，则最大熵为 ，达到最大 值的条件是 。 4、离散信源存在剩余度的原因是 和 。 5、离散无记忆信源在进行无失真变长信源编码时，编码效率最大可以达 到 。 6、离散无记忆信源在进行无失真变长信源编码时，码字长度是变化的。根据信源符号 的统计特性，对概率大的符号用 码，对概率小的符号用 码，这样平均码 《信息论与编码》试卷第1 页 长就可以降低，从而提高编码效率。 7、八进制信源的最小熵为 ，最大熵为 。 8、一个事件发生概率为 0.125，则自信息量为 。 9、在下面空格中选择填入数学符号“ ，≥ ，≤ ， ”或“ ” ( ) ( ) ( ) ( ) ( ) H XYH Y H X Y + | H Y H X + 。 二、判断题（正确打√，错误打×）（共 5 分，每小题 1 分） 1）离散无记忆等概信源的剩余度为 0 。 （ ） 2）离散无记忆信源 N 次扩展源的熵是原信源熵的 N 倍。 ( ) 3）互信息可正、可负、可为零。 （ ） 4）信源的真正功率P 永远不会大于熵功率P ，即P ≤ P 。 （ ） 5）信道容量与信源输出符号的概率分布有关。 （ ） p (x ) 三、（5 分）已知信源的概率密度函数 如下图所示，求信源的相对熵。 《信息论与编码》试卷第2 页 四、（１5 分）设一个离散无记忆信源的概率空间为 它们通过干扰信道，信道输出端的接收符号集为Y