信息率失真函数基本概念.pptVIP

第4章 信息率失真函数 信息率失真函数 主要内容： 限失真信源编码定理 信息率失真函数 保真度准则下的信源编码定理 教学基本要求： 掌握率失真函数的定义、性质、计算 掌握保真度准则下的信源编码定理 重点和难点： 率失真函数(离散信源，连续信源)的计算 保真度准则下的信源编码定理 本章主要内容 4.1 基本概念 4.2 离散无记忆信源R(D)的计算 4.3 连续无记忆信源的R(D)的计算 4.4 信道容量和信息率失真函数的比较 4.5 保真度准则下的信源编码定理 理论上“消息完全无失真传送”的可实现性 信道编码定理：无论何种信道，只要 H(X)=信息速率R=信道容量C 总能找到一种编码，使在信道上能以任意小的错误概率和无限接近于C的传输速率来传送信息。反之，若 RC 则传输必失真。 实际上“消息完全无失真传送”的不可实现性 要做到无失真信源编码，要求H(X)RC；实际的信源常常是连续信源，连续信源的绝对熵无穷大,要无失真传送，则信息率R也需无限大，信道容量C也必须为无穷大。 而实际信道带宽是有限的，所以信道容量受限制。因此无法满足无失真传输的条件，因此传输质量必然受影响。 有些失真没有必要完全消除（限失真信源编码） 实际生活中，人们一般并不要求获得完全无失真的消息，通常只要求近似地再现原始消息，即允许一定的失真存在。 打电话，即使