《信息论与编码基础》课件 6-信源的相关性与剩余度.ppt

《信息论与编码基础》课件 6-信源的相关性与剩余度.ppt

§2离散信源§2.1离散信源的信息熵§2.2熵的基本性质§2.3信源的相关性与剩余度*扩展信源:平稳信源:§2.3信源的相关性和剩余度§2.3信源的相关性和剩余度定义:设某q元信源的极限熵(实际熵),则定义:为信源剩余度。H∞≤…≤H(XN|X1,…XN-1)≤…≤H(X2|X1)≤H(X1)≤H0=logq信源实际熵H∞与理想熵H0相差越大,信源的剩余度就越大,信源的效率也越低。例1英文源:H0=log27=4.76(bit/sig)INNOTHHEERANREEDONESST

文档评论(0)

1亿VIP精品文档

相关文档