信息理论试卷.docVIP

…………试卷装订线 ……………… 装订线内不要答题，不要填写考生信息………………试卷装订线 ………… 姓 名 学 号 专业班级 学院 武汉理工大学考试试卷（A、B卷） 2010 ~2011 学年 2 学期 课程 闭卷 时间120分钟， 学时， 学分，总分100分，占总评成绩 % 年 月 日 题号 一 二 三 四 五 六 七 八 九 十 合计 满分 20 20 15 15 15 15 100 得分 一、填空题 每空1分，共20分 1. 在对信源进行观察之前，对认识主体来说，信源存在 ，它与信源的 有关。 2. 考虑任意N个相邻时刻输出的随机变量，将其看成一个新的离散无记忆信源的输出，则称为 。 3. 是自信息量的统计平均，对数以2为底时，单位是 。 4. 一般衡量一个信息传递系统的好坏，有两个主要指标，其一，信息率R，即 ，其二，平均差错率，即 。 5. 设Ｘ的取值受限于有限区间［］9. 最小码间距离是衡量码的性能的重要参数，信道编码在选择码字组成一个码时，只要条件允许，尽量使码的最小码间距离 一些为好。 10. 设离散无记忆平稳信源的信息率失真函数为，若，则无论采用什么样的编码方法，其译码失真必大于 。 11. 在加性高斯噪声信道中传输信息， 分布的输入信号是最有效的。 12. 将一个码标在码树上，如果其所有码字均处于 节点上，则该码为非续码。 13. 信息率失真函数是关于的 函数。 14. 失真度（或失真函数）是 实值函数。 15. 物理量、、、、、中，只有 不具有非负的性质。 二、简答题（每小题5分，共20分） 1. 分析连续信源熵和离散信源熵的异同点。 2. 简述唯一可译性和非奇异性的区别与联系。 3. 简述信源的信息率、信息速率、信息含量效率和信息冗余度的概念。 三．设有离散无记忆信源 ，试对信源进行四元Huffman编码，求信源熵H S ，平均码长和编码效率。（编码时码树各分枝概率从大到小分别编0至3码）（15分） 四、三个特殊的DMC的转移矩阵如下（15分）： 分别判断各信道属何种信道（无损、确定、无损确定、对称、准对称、一般），求出各信道的最佳输入分布和信道容量。（注：） 六、（15分）设离散无记忆信源通过离散无记忆信道 传送信息，设信源的概率分布和信道的线图分别为 试求： （1）信源的符号和分别含有的自信息； （2）从输出符号分别所获得的关于输入符号的信息量。 …………试卷装订线 ……………… 装订线内不要答题，不要填写考生信息………………试卷装订线 ………… 4 得分 得分 二 得分 二 得分 二 得分 二