信息论与编码离散信道.pptVIP

由题可知, 信道的转移概率矩阵为 可得条件概率和联合概率分别为 第六十二页，共九十九页，2022年，8月28日 根据条件概率和联合概率可得条件熵为 根据信源熵和条件熵可得平均互信息为 I(X?;Y)=H(X)-H(X|Y)=1-0.27=0.73 比特/符号 第六十三页，共九十九页，2022年，8月28日 第三章 离散信道 3.1 信道的数学模型及分类 3.2 信道疑义度及平均互信息 3.3 平均互信息的特性 3.4 离散无记忆的扩展信道 3.5 信道容量及其迭代算法 3.6 信源与信道的匹配 第六十四页，共九十九页，2022年，8月28日 离散无记忆的N次扩展信道 1、信道模型 第六十五页，共九十九页，2022年，8月28日 离散无记忆的N次扩展信道 2、转移概率矩阵 第六十六页，共九十九页，2022年，8月28日 [例3.5] 求例3.1中二元无记忆信道的二次扩展信道 输入符号集A2=[00,01,10,11],输出符号集B2=[00,01,10,11]; 转移概率为 转移概率矩阵为 第六十七页，共九十九页，2022年，8月28日 N次扩展信道的平均互信息 N次扩展信道的平均互信息为 定理3.3 如果信道是无记忆的(信源有记忆), 即 等式成立条件: 信源