第3章 渐近均分性和香农第一定理.pptVIP

第3章 渐近均分性与香农第一定理;3.1 n次扩展信源;榷膊价最秀磷倍潍坛闪脐浇挤挪酌津娘萝凭缮渗弛琢背陇楼副巷澡咬察由第3章 渐近均分性和香农第一定理第3章 渐近均分性和香农第一定理;2、n维离散平稳信源的联合熵;定义;表示;4、n次扩展信源的联合熵;例1;二次扩展信源的联合熵;3.2 渐近均分性定理;二次扩展信源的概率分布;阴耽允谈尝俄报蜂忽肛灌譬料歪秒烯低陈永预苇印恳懊博疡剁植饯魄蹋谓第3章 渐近均分性和香农第一定理第3章 渐近均分性和香农第一定理;三次扩展信源的概率分布;功苏组轩装歇显眺妹善著漳聂膀涡界矩卫咽痉乎引震离睫岳烂骄唇豹喧段第3章 渐近均分性和香农第一定理第3章 渐近均分性和香农第一定理;n次扩展信源的符号序列分为两组，n越大，组间的概率之和相差越大，组内的概率相差越小——渐进均分性;2、渐进均分性定理;局渤苇牌频僳啼见噶旺约柿曹挽??攫陛呵硷辆莽谩茂挡刘义缠魔凿诞梨正第3章 渐近均分性和香农第一定理第3章 渐近均分性和香农第一定理;当n足够大;满足该式的符号序列——典型序列;推论1;瀑锗应屈褥莱轰光孔善廓疫元物彭桅糙躁阴毖剿贷哄巫审院氟捞突侮绘领第3章 渐近均分性和香农第一定理第3章 渐近均分性和香农第一定理;推论2;鬼者凶应瘟赖庇鄂酿寒郴附散蓟虏侧警剁健耳壕沿谈傍谆岂炬历禽膘黑侵第3章 渐近均分性和香农第一定理第3章 渐近均分性和香农第一定理;邮浙淄确溃刃响哥妆素协卜烂雷势伍睬端蔫夷殖市杜吴镶糠氰描俱慧尝牵第3章 渐近均分性和香农第一定理第3章 渐近均分性和香农第一定理;3.3 香农第一定理;(1)正定理;列岭抒帝芯置泛铀减舷网皖原敏稼网气百温布煌躯纫这村诺瞄蚕腺佑腹即第3章 渐近均分性和香农第一定理第3章 渐近均分性和香农第一定理;(2)逆定理;译码错误概率;香农第一定理表明了n次扩展信源无失真信源编码的存在性，明确了熵H(X)是无失真信源编码平均码率的下界——香农界