《信息论基础》课程教学大纲.docxVIP

第 PAGE \* Arabic 1 页 / 共 NUMPAGES \* Arabic 12 页 《信息论基础》课程教学大纲 课程名称：信息论基础?????????????课程类别：专业必修课 适用专业：电子信息工程???? ?????????考核方式：考试???? 总学时、学分：72学时4学分?? ?? 其中讲授56学时，实验10学时，其它6学时 一、课程性质、教学目标 随着香农信息论为核心的信息理论从发展走向成熟，在信息理论的主导和推动下，信息计算技术、信息存储与处理技术以及信息安全可靠的传输技术等都取得了突破性的进展和卓越的成就。信息业的发展，需要大量从事信息、通信、电子工程类专业的人才，而《信息论基础》课程为电子信息工程学科的通信工程专业方向中的核心知识单元，也是该专业方向中的基础知识单元，同时也可作为信息科学其它相关学科的选修课，掌握它可以指导理论研究和工程应用。 该课程主要包括离散信源及其信息测度、离散信道及其信道容量、无失真信源编码定理、无失真信源编码、信道的纠错编码等基本内容。是学习《通信原理》专业核心课的必备基础，是《数字通信》、《无线通信》等专业方向课程的重要基础。其具体的课程教学目标为： 课程教学目标1：了解信息论知识形成的过程，熟练掌握自信息、信息熵、离散无记忆扩展信源熵的基本计算方法，了解马尔科夫信源和信源剩余度的基本概念，理解信源编码在通信系统中的作用。 课程教学目标2：理解离散平均互信息、噪声熵、损失熵、信道容量的基本计算方法。探究各种熵概念形成的原因，学会发觉问题、分析问题、解决问题的方法。 课程教学目标3：理解无失真信源编码定理，能够对信源编码的各种码型进行判断，掌握即时码的判断条件以及构造方法。掌握在无失真条件下，对信源进行的常用编码方法。学会探究编码过程，形成创新精神。 课程教学目标4：理解有噪信道编码定理，掌握线性分组码的编码方法、校验方法以及纠错检错能力。能够形成善于发觉特点，总结规律，提出解决方法的科学精神。 课程教学目标5：能够通过数学工具，对熵、信道容量、信源编码、信道编码等基本内容进行分析探究。能够将抽象问题形象化展示，形成一定的实践能力。 课程教学目标与毕业要求对应的矩阵关系 教学目标 毕业要求 1 2 3 4 5 6 7 8 教学目标1 ? M H ? M M M L 教学目标2 ? M H ? M M M L 教学目标3 ? M H ? M M M L 教学目标4 ? M H ? M M M L 教学目标5 ? H H H H M M L 二、课程教学要求 本课程注重基本概念、基本理论和基本分析方法的论述，并结合实例建立数学模型，给出推演过程，力求物理概念清晰、数学结构严谨和完整、逐步深入展开。通过该课程的学习，使学生掌握香农信息论的三个基本概念，与之相应的三个编码定理，以及信源编码、信道编码和信息保密编码的基本理论和主要方法，培养学生能够适应数字通信、信息处理、信息安全、计算机信息管理等编码工作的要求。使学生掌握信息理论的基本概念和信息分析方法及主要结论，为今后从事信息领域的科研和工程工作进一步研究打下坚实的理论基础。 三、先修课程 线性代数、概率论。 四、课程教学重、难点 教学重点： 信息以及信息的测度、信道及信道容量、无失真信源编码方法、信道纠错编码。 教学难点： 香农三大编码定理和香农公式。 五、课程教学方法与教学手段 课堂讲学为主，课余主要知识点仿真实验和习题练习。 六、课程教学内容 第一章 绪论（2学时） 1.?教学内容 （1）信息的概念及自信息的表示方式； （2）信息论研究的对象、目的和内容，信息论发展简史。 2.?重、难点提示 （1）重点是样本空间、概率测度、概率空间、自信息、互信息； ??（2）难点是香农信息定义的优缺点。 第二章 离散信源及其信息测度（8学时） 1.?教学内容 （1）信源的数学模型，离散无记忆信源及其扩展信源； （2）自信息、信息熵、离散无记忆扩展信源熵，熵的基本性质及最大离散熵定理； （3）离散平稳信源定义，联合熵，条件熵以及极限熵； （4）马尔可夫信源定义，马尔可夫信源熵。信息剩余度以及自然语言熵。 2.?重、难点提示 （1）重点是信源的数学模型及熵的概念； （2）难点是马尔科夫信源熵求解。 第三章 离散信道及其信道容量（8学时） 1.?教学内容 （1）信道数学模型及不同的分类； （2）信道疑义度，互信息和平均互信息及其特性，平均条件互信息及其特点； （3）离散无噪信道及信道容量，对称离散信道、准对称信道和一般离散信道的容量计算； （4）离散无记忆扩展信道及其容量，独立无记忆扩展信道及其信道容量； （5）独立并联信道及其信道容量，串联信道的互信息和数据处理定理； （6）信源与信道的匹配。 2.?重、难点提示 （1）重