3信道与信道容量new试卷.ppt

第3章 信道与信道容量 3.1 信道的分类与表示参数 3.2 离散单个符号信道及其容量 3.3 离散序列信道及其容量 3.4 连续信道及其容量 信道是待传输信息的物理载体信号所要经过的通道。 信息是抽象的，信道则是具体的。比如：二人对话，空气中的声波是信道；打电话，电话线是信道；看电视、听广播，发送与接收天线之间的电磁空间就是信道。 信道主要的研究问题就是研究信道中理论上能够传输或存储的最大信息量，即信道容量的问题。 3.1 信道分类和表示参数 由于信道存在干扰，信道的输入符号与输出符号之间的函数依赖关系满足特定的概率分布特性，而不是确定的关系。 3.1.1 信道分类 用户数量：单用户(一个输入、一个输出、单向传输)、多用户（至少一端有多个用户、双向） 输入端和输出端关系：无反馈、有反馈 信道参数与时间的关系：固定参数（如光纤、电缆、时变参数（如无线信道） 噪声种类： 随机差错（如高斯白噪声）、突发差错（如突发的强电磁干扰） 输入输出信号的特点：离散、连续、半离散半连续、波形信道 信道是一个广义的术语，可以是一段简单的物理通信线路，也可以是一个复杂的数据处理过程或大型通信系统。 在图1－1中，信道的内涵可以大至整个通信传输过程，也可以细化为一个个特定的阶段。 不同的信道体现出不同的特性。 通常，信道中存在干扰，输出信号与输入信号之间没有固定的函数关系，只有统计依赖的关系。研究信道必须分析输入、输出信号之间的统计特性。 3.1.2 信道参数 类似于对信源的统计描述，对信道而言描述它的三要素是： 1、信道输入随机向量的概率分布空间：［X，p(X)］ 2、信道输出随机向量的概率分布空间：［Y，p(Y)］ 3、信道本身的统计特性，信道转移概率(矩阵)：P(Y|X)，用来描述输入输出符号之间的统计依赖关系。 信道分类 根据信道是否存在干扰以及是否有记忆，可以分为 ： 1、无干扰(无噪声)信道； 2、有干扰无记忆信道：BSC、DMC； 二进制对称信道(BSC) 在有干扰无记忆信道中，根据输入输出符号的个数可以分为几种类型。 二进制、对称信道：具有对称的二进制输入、二进制输出且转移概率矩阵对称的信道叫做二进制对称信道，简称为BSC信道。 输入符号集X：(0，1)，输出符号集Y：(0，1)。 二进制对称信道的数学模型也可用信道转移矩阵来表示，即： 二进制可删除信道 二进制可删除信道：信道的输入符号集X：(0，1)，输出符号集Y：(0，?，1)，传递概率为： 二进制可删除信道的传递特性也可用传递图表示： 离散无记忆信道(DMC) DMC的数学模型 二进制对称BSC信道其实就是：当n=m=2且转移概率矩阵对称的离散无记忆DMC信道。 3、离散输入、连续输出信道 波形信道 4、有干扰有记忆信道 有干扰、有记忆信道：在实际信道中，如果存在码间干扰，当前输出符号不仅与当前输入符号有关，同时与之前的输入符号有关，处理过程非常困难： 一、将记忆较强的L个符号当作矢量符号，各矢量符号之间无记忆。此时必然引入误差，但L越大、误差越小； 二、将信道转移概率看成记忆长度有限的马尔可夫链的形式，从而加以简化。 分析过程中，采用哪一种信道模型取决于研究的对象和目的。 3.2 离散单个符号信道及其容量 消息传输率R：信道中平均每个符号所能传送的信息量。 R=I(X;Y)=H(X)－H(X/Y) 比特/符号 信息传输速率：若信道平均每传一个符号需要 t秒，信息传输速率Rt是指信道在单位时间内平均传输的信息量。则有： Rt=I(X;Y)/t 比特/秒 信道容量 信道容量C的定义： 对于特定的信道，信道容量是一个定值，但在传输信息时信道能否提供最大的传输能力则取决于输入端的概率分布。 3.2.1 无干扰离散信道 如果信道转移概率矩阵的每一行中只包含一个1，其余元素均为0，说明信道无扰，称为无干扰(无噪声)离散信道。 无扰（无噪）信道是一种确定性信道，是指：针对任何一个输入符号，信道输出端对应一个确定的输出符号。 当信道输入符号为xi，信道输出由于干扰的存在对应一组条件概率各异的输出yi，这种信道称为有干扰(有噪声)离散信道。 显然，输入xi时各可能yi输出值的概率之和必定等于1，即：信道转移概率矩阵中，任一行之和为1。 只有理想情况下，信道才无干扰。从互信息角度看，这时通过信道的互信息即信宿所收到的信息就是信源所输出的信息。信道中所通过的最大信息量即信源所输出的最大熵。 严格地说，信道总是存在干扰的。在实际问题中，一般也可以将干扰很小的以致于达到可以忽略程度的优质信道如光纤信道视为无干扰信道。 对于无干扰信道p(y|x)＝0/1，即y与x有确定性关系，信道传输中无信息损失。这时在信道中能传送的最大信息率就是最大熵值。若进一步细分，