信息论与编码傅祖云讲义.pptxVIP

会计学1信息论与编码傅祖云讲义 第三章 离散信道及其信道容量本章的重、难点内容：了解信道的分类及基本数学模型掌握平均互信息和平均条件互信息的概念和意义知道平均互信息的特征掌握信道容量及其一般计算方法*第1页/共63页 信道的数学模型及分类在广义的通信系统中，信道是很重要的一部分。信道的任务是以信号方式传输信息和存储信息。研究信道的目的就是研究信道中能够传送或存储的最大信息量，即信道容量问题。本章首先讨论离散信道的统计特性和数学模型，然后定量地研究信道传输的平均互信息及其性质，并导出信道容量及其计算方法。本章只限于研究一个输入端和一个输出端即单用户信道，以无记忆、无反馈、恒参离散信道为重点。第2页/共63页 3.1.1 信道的分类根据信道的用户多少根据信道输入输出的关联根据信道参数与时间的关系根据输入输出信号的特点两端（单用户）信道多端（多用户）信道无反馈信道反馈信道固定参数信道时变参数信道离散信道连续信道半离散或半连续信道波形信道第3页/共63页 离散信道的数学模型离散信道的数学模型如下图所示信道XY图3.1 离散信道数学模型 根据信道的统计特性即条件概率 的不同，离散信道又可分成三种情况。第4页/共63页 离散信道的数学模型无干扰（无噪）信道有干扰无记忆信道：离散无记忆信道的充要条件对任意N值和任意x、y的取值，上式都成立。有干扰有记忆信道：即有干扰（噪声）