第六章有噪信道编码.docVIP

第六章有噪信道编码 第六章有噪信道编码 PAGE / NUMPAGES 第六章有噪信道编码 第六章 有噪信道编码 6.1 R 为信息传输率，依据香农第二定理，当码长 n-无量大时，知足什么关系式，可使错 误概率 Pe-0。 答：Peexp{-nE(R)}-0 ，此中 E(R) 为靠谱性函数，且在 9RC 的范围为正。信道容量 C 是 保证无差错传输时，信息传输率 R 的权限值。 6.2 写出费诺不等式，此中哪一项表示能否判对的疑义度， log(k-1) 又表示什么？ 答： H(X|Y)=H2(Pe)+Pelog(k-1) ，H2(pe) 能否判对的疑义度。表示假如裁决犯错，错在 k-1 个符号中的一个，疑义度不会超出 log(k-1) 。 6.3 依据香农定理说明， （信息容量） 是保证无差错传输时信息传输率 R 的上限值，（均匀错 误概率）是信源可压缩信息的最低极限。 6.4 最大后验概率译码准则就是最小错误译码准则，对吗？ 错误。 pe y ( xk xk | y) (xi | y) 1 (xk | y) 这个公式可知最大后验概 i k 率与最小错误译码准则所得的最后结果是相等的。但并不是观点定义一致。 6.5 在信源等该散布时，则极大似然函数译码准则就是最小错误译码准则，对吗？ Proof: if p y | xk p( y | xk ) m=1,2, ,M Then 信道等概率输入时，有 q(xk ) q( xm ), 代入上式得 p( y | xk ) q( xk ) p( y | xm )q( xm ) So,it comes to p( xk y) p( xm y) 所以说明全概率最大，对应最大结合概率译码准则。 1/2 1/6 1/3 6.6 失散无记忆信道 DMC ，转移概率矩阵为 P= 1/3 1/2 1/6 1/6 1/3 1/2 (1 )q(x1)=1/2 q(x2)=1/4 q(x3)=1/4. 求最正确裁决译码及错误概率。 （2）若信源等概散布，求最正确裁决译码及错误概率。 解： 1 1 1 4 12 6 （1）第一求结合概率矩阵 PXY 1 1 1 6 4 12 1 1 1 12 6 4 最大后验概率准则即最小错误概率准则， 也等同于最大结合概率准则， 所以， 从结合概率矩 阵的每一列中选结合概率最大的发送符号作为译码输出，所以将 y1 x1 , y2 x2 , y3 x3 此时正确译码概率为 pc p( x1 y1 ) p( x2 y2 ) p(x3 y3 ) 1 3 3 4 4 错误概率为 pe 1 pc 1 4 2）当信源等概率散布时，极大似然准则等价于最大后验概率准则，所以从信道矩阵的每一列中取转移概率最大的一个发送符号作为相应接收符号的译码输出，即是最正确译码方案， 所以将 y1 x1 , y2 x2 , y3 x3 此时正确译码概率为 pc p(x1 y1 ) p(x2 y2 ) p(x3 y3 ) 1 (1 3) 1 3 2 2 错误概率为 pe 1 pc 1 2