信息论与编码理论基础(第四章).pptVIP

第四章：信道及其容量 §4.1 信道分类 §4.2 离散无记忆信道 §4.5 信道的组合 §4.6 时间离散的无记忆连续信道 §4.7 波形信道 §4.1 信道分类 信道是传输信息的媒质或通道。（输入→信道→输出） 说明 （1）信道输入是随机过程。 （2）信道响应特性是条件概率P(输出值为y|输入值为x)，又称为转移概率。 （3）信道输出是随机过程，输出的概率分布可以由输入的概率分布和信道的响应特性得到。（全概率公式） （4）根据信道输入、信道响应特性、信道输出的情况，可将信道分类：离散信道（又称为数字信道）；连续信道（又称为模拟信道）；特殊的连续信道——波形信道；恒参信道和随参信道；无记忆信道和有记忆信道；等等。 §4.2 离散无记忆信道 定义4.2.1和定义4.2.2(p104) 如果 （1）信道的输入为随机变量序列X1, X2, X3, …，其中每个随机变量Xu的事件集合都是{0, 1, …, K-1}， （2）信道的输出为随机变量序列Y1, Y2, Y3, …，其中每个随机变量Yu的事件集合都是{0, 1, …, J-1}， 则称该信道为离散信道。如果更有 （3）P((Y1Y2…YN)=(y1y2…yN)|(X1X2…XN)=(x1x2…xN)) =P(Y1=y1|X1=x1)P(Y2=y2|X2=x2)…P(YN=yN|XN=xN)， 则称该信道为离散无记