决策树模型概述.pptx

;排名;信息的定量描述;信息量的定义;对信息量的认识理解;抛一枚均匀硬币，出现正面与反面的信息量是多少？ 解：出现正面与反面的概率均为0. 5，它们的信息量是 I(正)= -lbp(正)= -lb0.5=1b I(反)= -lbp(反)= -lb0.5=1b ;抛一枚畸形硬币，出现正面与反面的概率分别是1/4，3/4，出现正面与反面时的信息量是多少？ 解：出现正面与反面的概率分别是1/4，3/4，它们的信息量是 I(正)= -lbp(正)= -lb1/4=2b I(反)= -lbp(反)= -lb3/4=0.415b ;信源含有的信息量是信源发出的所有可能消息的平均不确定性，香农把信源所含有的信息量称为信息熵，是指每个符号所含信息量的统计平均值。m种符号的平均信息量为;抛一枚均匀硬币的信息熵是多少？ 解：出现正面与反面的概率均为0. 5，信息熵是 ;抛一枚畸形硬币，出现正面与反面的概率分别是1/4，3/4，出现正面与反面时的信息量是多少？ 解：出现???面与反面的概率分别是1/4，3/4，信息熵是 ;例：气象预报;12;13;是否适合打垒球的决策表;活　动;活动的熵;已知户外的天气情况下活动的条件熵;已知户外时活动的条件熵;平均互信息;是否适合打垒球的决策表;活动的熵;已知天气时活动的条件熵;天气 ;天气 ;天气 ;各互信息量;天气;ID3算法生成的决策树;ID3算法;2003.11.18;2003.11.18;2003.11.18;33;2003.11.18;2003.11.18;2003.11.18;2003.11.18;2003.11.18;2003.11.18;2003.11.18;2003.11.18;2003.11.18;2003.11.18;2003.11.18;分类器评价标准;准确度分析;召回率r(Recall)和精准率p(Precision);F1;构造分类器的主要步骤;训练数据和测试数据的划分方法;作业;谢谢！