信息論编码试卷1.docxVIP

信息论编码试卷1一、（11’）填空题1948年，美国数学家 香农 发表了题为“通信的数学理论”的长篇论文，从而创立了信息论。必然事件的自信息是 0 。 离散平稳无记忆信源X的N次扩展信源的熵等于离散信源X的熵的 N倍 。 对于离散无记忆信源，当信源熵有最大值时，满足条件为__信源符号等概分布_。对于香农编码、费诺编码和霍夫曼编码，编码方法惟一的是 香农编码 。已知某线性分组码的最小汉明距离为3，那么这组码最多能检测出_2_______个码元错误，最多能纠正___1__个码元错误。设有一离散无记忆平稳信道，其信道容量为C，只要待传送的信息传输率R__小于___C（大于、小于或者等于）， 则存在一种编码，当输入序列长度n足够大，使译码错误概率任意小。平均错误概率不仅与信道本身的统计特性有关，还与___译码规则____________和___编码方法___有关二、（9）判断题 信息就是一种消息。 （ ）信息论研究的主要问题是在通信系统设计中如何实现信息传输、存储和处理的有效性和可靠性。 （ ）概率大的事件自信息量大。 （ ）互信息量可正、可负亦可为零。（ ）信源剩余度用来衡量信源的相关性程度，信源剩余度大说明信源符号间的依赖关系较小。 （ ） 对于固定的信源分布，平均互信息量是信道传递概率的下凸函数。 （ ） 非奇异码一定是唯一可译码，唯一可译码不一定是非奇异码。