领域分析数据集构建的理论与方法 - 电子商务学院- 云南农业大学.PPT

信息量的大小取决于信息内容消除人们认识的不确定性程度。 申农的信息量计算公式为： 　　 n 为所有可能的结果数 表示第i种结果发生的可能性（概率）大小 H 为消除不确定性所需要的信息量,信息量的单位叫比特（bit） 1比特的信息量指含有两个独立均等概率状态的事件所具有的不确 定性能被全部消除所需要的信息。 信息量 例：渔民在安排明天的工作：是出海打鱼，或是在岸上结网？只考虑天气影响。在人们犹豫不决时，收到天气预报消息，明天将有七级大风，出海打鱼是十分危险的。于是，人们决定岸上结网。 “犹豫不决”——不确定性。如一半人赞成打鱼，一半人赞成结网。听了天气预报后，99％的人赞成岸上结网。如何度量天气预报给人的信息量呢? 在听天气预报之前，决策系统所拥有的信息量为： 　　　H0 ＝－(0.5×log20.5＋0.5×log20.5)＝１ 在听天气预报之后，决策系统所拥有的信息量为： 　　　H1 ＝－(0.99×log20.99＋0.01×log20.01)＝0.08079 天气预报的信息量 H0－H1＝1－0.08079＝0.91921 1.2信息组织的学科发展基础 信息组织发展的理论基础 1 信息组织发