《信息论与编码原理》孟放-第二章 离散信源及其信息测度-20160920 - 第一次授课.pdfVIP

第一章要点复习 什么是信息？ 是事物运动状态或存在方式下不确定性的 描述 如何理解“不确定性”？ 通信系统的基本模型 1 概率论知识的回顾–书写要求及格式   已知随机变量的联合概率分布p x y i j ( ) 如下所示，求条件概率p y |x 。 j i   y j p x y i j 0 1 2 0 1/8 0 1/8 x 1 1/8 1/8 0 i 2 0 1/4 1/4 2 练习（1）  某年级有甲，乙，丙3个班级，各班人数分别占 年级总人数的1/4，1/3，5/12 。已知甲，乙，丙3 个班级中集邮人数分别占该班总人数的1/2，1/4， 1/5 （1）事件“某人为集邮者”的概率； （2 ）事件“某人既为集邮者，又属于乙班” 的概率。 （3 ）事件“某集邮者是乙班的”的概率. 练习（2）  某校入学考试中有25%考生被录取。被录取的考 生中有50%来自本市，而落榜考生中有25%来自 本市。所有本市的考生都学过英语，外地考生中 录取和未录取的都只有50%学过英语。问： （1）“某学生学过英语”这一事件发生的概率 （2 ）“学过英语的某学生被录取”这一事件发生 的概率 （3 ）考生地域状态已知时英语学习状态的概率分 布。 练习（3）  设有来自两个地区的考生报名表分别是10份和15 份，其中女生的报名表分别是3份和7份。随机地 取一个地区的报名表，从中先后抽出两份（不放 回）, 问： （1）“先抽到的一份是女生表”的概率 （2 ）“后抽到的一份是男生表”的概率 （3 ）“先抽到的一份是女生表，后抽到的一份是 男生表”的概率 （4 ）“后抽到的一份是男生表的条件下，先抽到 的一份是女生表”的概率 第二章 离散信源及其信息测度 信息工程学院孟放 2016/9/21 信息论的旅程  从本章开始，我们将从有效而可靠地传输信息的观点 出发，对组成信息传输系统的各个部分进行讨论。 【2】离散信源及其信息测度 【3】离散信道及其信道容量 【4】波形信源 【4】波形信道 【5】无失真信源编码定理