信息论与编码(二).docxVIP

PAGE PAGE # 设计目的 信息论与编码是我们电子信息工程的一门重要的专业课，通过对本次课程设 计，学习将学到的理论知识用于实践， 同时也学习了用软件编写程序， 进一步对 本课程知识的巩固和理解。学习分析问题，解决问题的方法和途径，提高对本专 业的学习兴趣。 二设计任务与要求 (1)统计信源嫡 要求：统计任意文本文件中各字符(不区分大小写)数量，计算字符概率， 并计算信源嫡。 (2)哈夫曼编码 要求：任意输入消息概率，利用哈夫曼编码方法进行编码， 并计算信源嫡和 编码效率。 三理论简介 通信系统的模型 通信系统的模型 PAGE PAGE # 通信系统的性能指标主要是有效性、可靠性、安全性和经济性，通信系统优 化就是使这些指标达到最佳，除了经济性，这些指标正是信息论的研究对象， 可 以通过各种编码处理来使通信系统的性能最优化。根据信息论的各种编码定理和 上述通信系统的指标，编码问题可以分为3类：信源编码、信道编码和加密编码。 信源编码 由于信源符号之间存在分布不均匀和相关性， 使得信源存在冗余度，信源编 码的主要任务就是减少冗余度，提高编码效率。信源编码的基础是信息论中的两 个编码定理：无失真编码定理和限失真编码定理。 前者适用于离散信源或数字信 号；后者主要用于连续信源或模拟信号。本次课程设计就是利用的无失真信源编 码。 信道编码 信源编码器的作用：把信源