- 1、本文档共19页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
习题1 同时掷两个正常的骰子,即各面呈现的概率都是1/6。求: “3和5同时出现”这一事件的自信息量。 “两个1同时出现”这一事件的自信息量。 两个点数的各种组合(无序对)的熵。 两个点数之和(即2,3,…,12构成的子集)的熵。 两个点数中至少有一个是1的自信息。 两个点数是3的信息量。 两个点数是7的信息量。 习题1 习题2 黑白传真机的消息元只有黑色和白色两种,即X={黑,白}。一般气象图上,黑色出现的概率为p(黑)=0.3,白色出现的概率为p(白)=0.7。求: 假设黑白消息视为前后无关,求信源熵H(X),并画出该信源的香农线图。 实际上各元素之间有关联,其转移概率为: p(白/白)=0.9143 p(黑/黑)=0.8 求:这个一阶马尔可夫信源的信源熵,并画出该信源的香农线图。 习题3 有6行、8列的棋型方格,若有两个质点A和B分别以等概率落入任一方格内,但A、B不能落入同一方格内。求: 若仅有质点A,求A落入任一个格的平均信息量 若已知A已落入,求B落入的平均信息量 若A、B是可分辨的,求A、B都落入的平均信息量 习题4 从大量统计资料知道,男性中红绿色盲的发病率为7%,女性发病率为0.5%,如果你问一位男士:“你是否色盲?”他的回答可能是“是”,可能是“否”,问这两个回答中各含有多少信息量,平均每个回答中含有多少信息量?如果问一位女士,则答案中含有的平均自信息量是多少? 习题5 在一个袋中放有5个黑球,10个白球,以摸一个球为一个实验,摸出的球不再放进去。求: 一次实验包含的不确定度。 第一次实验X摸出的是黑球,第二次实验Y给出的不确定度。 第一次实验X找出的是白球,第二次实验Y给出的不确定度。 第二次实验Y包含的不确定度。 习题6 有一个可旋转的圆盘,盘面上被均匀地分成38份,用1,2,…,38数字标示,其中有2份涂绿色,18份涂黑色,18份涂红色。圆盘停转后,盘面上指针指向某一数字和颜色。求: 若仅对颜色感兴趣,计算平均不确定度。 若对颜色和数字都感兴趣,计算平均不确定度。 如果颜色已知时,计算条件熵。 习题7 有两个二元随机变量X和Y,它们的联合概率如右表所示,并定义另一随机变量Z=XY(一般乘积)。试计算: H(X),H(Y),H(Z),H(XZ),H(YZ)和H(XYZ) H(X/Y), H(Y/X), H(X/Z), H(Z/X), H(Y/Z), H(Z/Y), H(X/YZ), H(Y/XZ)和H(Z/XY) I(X;Y), I(X;Z), I(Y;Z), I(X;Y/Z), I(Y;Z/X)和I(X;Z/Y) 习题7 习题8、9 某无记忆信源的符号集为{0,1},已知p0=1/4, p1=3/4。求: 求符号的平均熵。 由100个符号构成的序列,求某特定序列(m个“0”和100-m个“1”)的自信息量的表达式。 计算②中序列的熵。 设有一个二进制一阶马尔可夫信源,其信源符号为X∈(0,1),条件概率为 p(0/0)=0.25 p(0/1)= p(1/1)=0.5 p(1/0)=0.75 画出状态图并求出各符号稳态概率。 习题10 设有一信源,它在开始时以p(a)=0.6, p(b)=0.3, p(c)=0.1的概率发出X1。如果X1为a时则X2为a、b、c的概率为1/3;如果X1为b时则X2为a、b、c的概率为1/3;如果X1为c时则X2为a、b的概率为1/2,而为c的概率是0。而且后面发出Xi的概率只与Xi-1有关。又p(Xi/ Xi-1)= p(X2/ X1),i≥3。试利用马尔可夫信源的图示法画出状态转移图,并求出转移概率矩阵和信源熵H∞。 习题11 一个马尔可夫过程的基本符号0,1,2,这三个符号以等概率出现,具有相同的转移概率,并且没有固定约束。 画出一阶马尔可夫过程的状态图,并求稳定状态下的马尔可夫信源熵H1。 画出二阶马尔可夫过程的状态图,并求稳定状态下二阶马尔可夫信源熵H2。 习题12有点难度,重点看看 有一个一阶马尔可夫链X1, X2,…, Xr,…,各Xr取值于集A={a1, a2, a3}。已知起始概率p(ai)为:p1=1/2, p2=p3=1/4,转移概率如下表所示。求: 12题的答案 1.H(X1X2X3)=H(x1)+H(x2/x1)+H(x3/x2) H(x1)=-0.5log0.5-2*0.25log0.25=1.5bit/符号 P(aiaj)=P(ai)*p(aj/ai)得到图二,同理得图三; H(X2/X1)= P(aiaj)*log(paj/ai)相加;同理,得H(X3/X2); 2.根据图一画香农线图,的平稳概率,求极限熵; 3.H0=1-H 习题12 习题13 一阶马尔可夫信源的状态图如图所示,信源X的符号集为{0,1,2}。
您可能关注的文档
- 使用销售绩效管理看板.ppt
- 例1-7-3判断系统是否为线性非时变系统.ppt
- 例1环境因素识别与评价.ppt
- 使用财富管理手册辅导业务员.ppt
- 例三密码箱数字搭配简单的排列问题.ppt
- 例谈高考历史图表型试题的类型及解答技巧.ppt
- 供电局营业大厅展示.ppt
- 依法保护人类共有的家园.ppt
- 依法保护人类共有的家园[1].ppt
- 依法保护我们的家园.ppt
- 延吉市第一高级中学高中语文文言文教学的现状问题与突破路径.docx
- 破局与重塑:高中政治课教师媒介素养的提升之路.docx
- 语用学理论:开启中学小说教学新视野.docx
- 浸入式教学赋能初中英语听说课堂:基于真实案例的深度剖析与实践创新.docx
- 从重点中学到示范性高中:教育转型的深度剖析与发展路径探究.docx
- 解锁灵活工作计划的潜力:工作繁荣的影响与机制探究.docx
- 浙江省六城市居民体育生活满意度的多维审视与提升路径探究.docx
- 少数民族地区中学爱国主义教育的创新路径与实践探索.docx
- 探寻技术中的人文之美:理论实践与展望.docx
- 以太坊与属性加密赋能物联网数据可信交易:技术融合与应用创新研究.docx
最近下载
- 07米联客2020版FPGA教程(FT60X篇).pdf
- (完整)混凝土回弹强度自动计算EXCEL表.xls VIP
- 《 房地产企业税制改进政策研究》范文.docx VIP
- 房产抵押合同范本6篇 .pdf VIP
- 工业机器人系统操作员(技师)理论复习考试题库(附答案).docx
- 山东省中小学教师人工智能赋能教学教研线上研修活动单元测试答案.docx VIP
- 变电站水泥电线杆防腐加固工程施工组织设计方案(可编辑).doc VIP
- 第11课 近代职业教育的兴起和发展(教学设计)-【中职专用】《世界历史》.docx
- 关于延长中频炉炉衬寿命的探讨.pdf
- 核心素养导向下的小学科学教学改革研究教学研究课题报告.docx
文档评论(0)