第2章信源熵--马尔科夫信源及极限熵.pptVIP

单符号离散信源联合熵 多符号离散信源联合熵；条件熵 离散平稳信源、联合熵 离散平稳无记忆信源、联合熵 马尔科夫信源及其极限熵 冗余度与结构信息 马尔可夫链的应用 排队理论和统计学中的建模，还可作为信号模型用于熵编码技术，如算术编码 著名的LZMA数据压缩算法就使用了马尔可夫链与类似于算术编码的区间编码。 生物学应用， 人口过程，可以帮助模拟生物人口过程的建模。 隐蔽马尔可夫模型还被用于生物信息学，用以编码区域或基因预测。 马尔可夫链最近的应用是在地理统计学（geostatistics）中,被称为是“马尔可夫链地理统计学”。仍在发展过程中。 可利用一些编码的方法删去它们，从而达到减少冗余压缩数据的目的。 图像压缩编码 (1)无损压缩编码 (2)有损压缩编码 (3)混合编码，如 H261，JPEG，MPEG等技术标准 简单地说，如果没有数据压缩技术，我们就没法用 WinRAR 为 Email 中的附件瘦身；如果没有数据压缩技术，市场上的数码录音笔就只能记录不到 20 分钟的语音；如果没有数据压缩技术，从 Internet 上下载一部电影也许要花半年的时间 衡量一个压缩编码方法优劣的重要指标 (1)压缩比要高； (2) 算法简单，硬件实现容易； (3)解压缩的图像质量要好。 信道前向纠错编码（FEC）技术通过在传输码列中加入冗余纠错码，在一定条件下，通过解码可以自动纠正传输误码，降低