香农信息论.pptVIP

;目录; 克劳德·香农(Claude Elwood Shannon，1916-2001) 1916年4月30日诞生于美国密西根州。父亲是该镇的法官，母亲是镇里的中学校长，香农的祖父是一位农场主兼发明家，发明过洗衣机和许多农业机械；此外，香农的家庭与大发明家爱迪生还有远亲关系。 香农是美国数学家、信息论的创始人。1940年在麻省理工学院获得硕士和博士学位，1941年进入贝尔实验室工作。香农提出了信息熵的概念，为信息论和数字通信奠定了基础。主要论文有：1938年的硕士论文《继电器与开关电路的符号分析》，1948年的《通讯的数学原理》和1949年的《噪声下的通信》。 ; 香农是20世纪最杰出的人物之一。如果没有他，很多我们现在使用的物品根本就不可能存在。数字革命是由香农最初发起的。 ——内尔·斯罗恩（香农理论选集的编辑） Shannon理论的问世，象是引爆了一枚重磅的原子弹，震撼了整个科学界。 ——J.Pierce(香农的合作者和朋友）;;信息论是一门应用概率论、随机过程、数理统计和代数的方法，来研究广义的信息传输、提取和处理系统中一般规律的科学。 它是Shannon在四十年代末期，以客观概率信息为研究对象，从通信的信息传输问题中总结和开拓出来的理论。 狭义信息论（经典信息论）：主要研究