信息论基础课程教学大纲一-通信与信息工程学院.pdfVIP

《信息论基础》课程教学大纲 一、课程基本情况 课程编号 010251 课程类别 □必修 ■限选 □任选 学时/学分 32/2 课程名称 （中文）信息论基础 （英文）Fundamentals of Information Theory 教学方式 ■课堂讲授为主 □实验为主 □自学为主 □专题讨论为主 课程学时 课内总学时 课内学时分配 课外学时分配 及其分配 课堂讲课 32 课后复习 60 自学交流 课外自学 30 32 课堂讨论 讨论准备 试验辅导 实验预习 课内试验 课外实验 0 考核方式 ■闭卷 ■开卷 □口试 □实际操作 □大型作业 成绩评定 期末考试（70% ）＋平时成绩（30% ） 适用院系 通信与信息大类、通信工程专业卓越工程 适用专业 先修课程 高等数学、概率论与随机过程 预备知识 二.课程性质与任务 该课程是通信与信息领域中一门重要的学科基础课程。它应用概率论、随 机过程和现代数理统计方法，来研究信息提取、传输和处理的一般规律，提高信 息系统的有效性和可靠性，以实现信息系统的最优化。 通过对本门课程的学习,学生可以从通信系统中信息传输的角度，系统掌握 信息论的基本概念、基本理论以及基本分析方法，培养应用信息理论来分析和解 决通信系统中实际问题的能力，并为进一步学习研究各种现代信息技术打下必要 的理论基础。 三. 课程主要教学内容及学时分配 序号 教学内容 学时 1 绪论 2 2 信息的统计度量 8 3 离散信源和熵 6 4 无失真信源编码 4 5 离散信道和信道容量 4 6 有噪信道编码 2 7 连续信源和连续信道 4 8 限失真信源编码 2 合计学时 32 四.课程教学基本内容和基本要求 （一）绪论 1、理解信息的基本概念； 2 、掌握信息传输系统模型和性能指标； 3、与实际通信系统相联系，理解信息论的研究范畴。 （二）信息的度量 1、掌握离散随机变量的自信息和信息熵、联合自信息和联合熵、条件自信息 和条件熵、互信息和平均互信息的计算、性质和物理意义； 2 、掌握各种熵之间的关系； 3、理解信息处理定理。 4 、掌握连续随机变量的信息度量，包括绝对熵、相对熵和平均互信息的计算、 性质和物理意义。 （三）离散信源和熵 1、理解离散信源的分类和数学模型； 2