第4章 信息率失真函数.pptVIP

第4章 信息率失真函数 4.1 基本概念 4.1.1 失真函数与平均失真度 4.1.2 信息率失真函数 4.1.3 信息率失真函数的性质 4.2 离散信源的信息率失真函数 4.3 连续信源的信息率失真函数 4.4 保真度准则下的信源编码定理 无失真信道传输问题 无失真信源编码定理和有噪信道编码定理 无论无噪信道还是有噪信道，只要信息传输率R小于信道容量C，总可以找到一种编码方法，使得编码后的信息传输率R可以任意接近信道容量C（即R ? C），且信道产生的错误译码概率任意小。反之，如果R C，在任何信道上都不可能实现错误译码概率任意小的无失真的传输，或者说，要实现错误译码概率任意小，在任何信道上传输都必然产生失真。 问题：信道传输是否需要完全无失真？ 信道传输允许一定失真 传送每秒25帧的图像就能满足人类通过视觉感知信息的要求，而不必占用更大的信息传输率； 人类的听觉对大多数人只能听到几千赫兹到十几千赫兹，对于经过专业训练的音乐家，一般也不过听到20kHz的声音。 结论：实际应用要求在保证一定质量前提下在信宿近似地再现信源输出的信息，或者说在保真度准则下允许信源输出存在一定的失真。 实际通信系统的例子 在实际的通信系统中，信道容量有限，要求对信源进行压缩，如GSM通信： 本章讨论的问题 需要解决的问题： 对于给定的信源（即给定信源熵 H(X)），在允许的失真条件下