电子科大信息论和编码2016复习提纲.pptVIP

Chapter 1 信息( information)定义:消除不确定性的东 1. Theory (Chapter 2, 3, 4) 熵,信道容量,率失真函数 2. Algorithms (Chapter 5, 6) 信源編码,信道編码 2017/1/22  消息 信号信号十噪声消息 信源 編码 信道 信宿 消息( message)是由图像、声音、文字、数字等 符号组成的序列 信号( signal)是承载消息的载体,如电信号、光 信号等 消息( message)中用以消除不确定性的成,就 是信息( information) 017/1/22  Model of Digita Communicado Source Coding Channel Coding Compress H Encode channel Decode DEcompress Source Coding Compresses the data to remove redundancy Channel Coding Adds redundancy/structure to protect against channel errors  看农第一定理:信源发出的消息有冗余,为有敛通 信,可以进行瓜缩冗余的信源編码,给出无失真复现 消息的信源编码临界值(下界)