信息论与编码考试题(附答案版).docxVIP

精品文档 精品文档 按发出符号之间的关系来分，信源可以分为（有记忆信源）和（无记忆信源） 连续信源的熵是（无穷大） ，不再具有熵的物理含义。 对于有记忆离散序列信源，需引入（条件熵）描述信源发出的符号序列内各个符号 之间的统计关联特性 连续信源X,平均功率被限定为P时，符合（正态）分布才具有最大熵，最大熵是（1/2ln （ 2??????2））。 数据处理过程中信息具有（不增性） 。 信源冗余度产生的原因包括（信源符号之间的相关性）和（信源符号分布的不均匀 性）。 单符号连续信道的信道容量取决于（信噪比） 。 香农信息极限的含义是（当带宽不受限制时，传送 1bit 信息，信噪比最低只需 -1.