试论基于信息论的数据挖掘方法 .pptxVIP

第九章 基于信息论的数据挖掘方法;基于信息论的数据挖掘方法;信息论原理;信道模型;不确定性;不确定性;互信息;9、要学生做的事，教职员躬亲共做；要学生学的知识，教职员躬亲共学；要学生守的规则，教职员躬亲共守。6月-216月-21Sunday, June 27, 2021 10、阅读一切好书如同和过去最杰出的人谈话。21:30:4421:30:4421:306/27/2021 9:30:44 PM 11、一个好的教师，是一个懂得心理学和教育学的人。6月-2121:30:4421:30Jun-2127-Jun-21 12、要记住，你不仅是教课的教师，也是学生的教育者，生活的导师和道德的引路人。21:30:4421:30:4421:30Sunday, June 27, 2021 13、He who seize the right moment, is the right man.谁把握机遇，谁就心想事成。6月-216月-2121:30:4421:30:44June 27, 2021 14、谁要是自己还没有发展培养和教育好，他就不能发展培养和教育别人。27 六月 20219:30:44 下午21:30:446月-21 15、一年之计，莫如树谷；十年之计，莫如树木；终身之计，莫如树人。六月 219:30 下午6月-2121:30June 27, 2021 16、提出一个问题往往比解决一个更重要。因为解决问题也许仅是一个数学上或实验上的技能而已，而提出新的问题，却需要有创造性的想像力，而且标志着科学的真正进步。2021/6/27 21:30:4421:30:4427 June 2021 17、儿童是中心，教育的措施便围绕他们而组织起来。9:30:44 下午9:30 下午21:30:446月-21 2、Our destiny offers not only the cup of despair, but the chalice of opportunity. (Richard Nixon, American President )命运给予我们的不是失望之酒，而是机会之杯。二〇二一年六月十七日2021年6月17日星期四 3、Patience is bitter, but its fruit is sweet. (Jean Jacques Rousseau , French thinker)忍耐是痛苦的，但它的果实是甜蜜的。10:516.17.202110:516.17.202110:5110:51:196.17.202110:516.17.2021 4、All that you do, do with your might; things done by halves are never done right. ----R.H. Stoddard, American poet做一切事都应尽力而为，半途而废永远不行6.17.20216.17.202110:5110:5110:51:1910:51:19 5、You have to believe in yourself. Thats the secret of success. ----Charles Chaplin人必须相信自己，这是成功的秘诀。-Thursday, June 17, 2021June 21Thursday, June 17, 20216/17/2021 ? ;互信息的计算;;信息熵定义;12;信息熵定义;举例;讨论;举例;条件熵定义;平均互信息量定义;其他定义;信息论在决策树中的应用;基于信息论的数据挖掘方法;决策树的方法;决策树的基本概念;节点;叶子;决策树所产生的规则;举例1：银行贷款决定;举例2：信用风险分析;决策树的生成一(Building Tree);使用决策树进行分类;决策树算法;伪代码(Building Tree);属性选择的统计度量;ID3基本思想;用于概念学习的ID3算法;重要问题：哪个属性作为当前测试节点;;属性选择;熵的物理定义;决策树的学习过程;决策树的学习过程;信息增益（ Information Gain）;信息增益（ Information Gain）;训练集 PE、NE;决策树的方法;小王是一家著名高尔夫俱乐部的经理。但是他被雇员数量问题搞得心情十分不好。某些天好像所有人都来玩高尔夫，以至于所有员工都忙的团团转还是应付不过来，而有些天不知道什么原因却一个人也不来，俱乐部为雇员数量浪费了不少资金。 小王的目的是通过下周天气预报寻找什么时候人们会打高尔夫，以适时调整雇员数量。因此首先他必须了解人们决定是否打球的原因。 在2周时间内我们得到以下记录: ;属性 Outlook Temperature Humidit