北邮-田宝玉-信息论基础-第一章精品.pptVIP

信息论即仙农 Claude Edwood Shannon, 1916—2001 信息论，也称经典信息论，是研究通信系统极限性能的理论。从信息论产生到现在几十年来，随着人们对信息的认识不断深化，对信息论的研究日益广泛和深入，信息论的基本思想和方法已经渗透到许多学科，在人类社会已经进入信息时代的今天，信息理论在自然科学和社会科学研究领域还会发挥更大的作用。 信息的基本概念 仙农信息论所研究的内容 仙农信息论产生的背景、主要的研究进展及其应用 §1.1 信息的基本概念 信息论的产生 信息的基本概念 信息论的基本内容 物质 客观世界三大基本要素 能量 信息 信息时代社会的发展离不开物质 材料 、能量（能源）和信息资源。美国学者欧廷格说：“没有物质什麽都不存在，没有能量什麽都不发生，没有信息什麽都没意义。” 通信的基本问题：在一点精确地或近似地恢复另一点所选择的消息。 通信系统三项性能指标： 传输的有效性 传输的可靠性 传输的安全性 有效性 对于离散信源，信源符号平均码长度应尽量短； 信息传输应尽量快，即高的传信率； 信息传送应该有高的频谱利用率 。 可靠性 传输差错要尽量少 ，对数字传输就是要求低的误码率。 安全性 传输的信息不能泄露给未授权人。 　三项指标所对应的三项基本技术： 数据压缩 数据纠错 数据加密 　　仙农信息论解决了前两项技术的理论问题