第8章集成学习理论.pptVIP

第8章集成学习理论;;在机器学习中，直接建立一个高性能的分类器是很困难的。

但是，如果能找到一系列性能较差的分类器，并把它们集成起来的话，也许就能得到更好的分类器。

日常生活中，所谓的民主决策，便是部分的利用了这种想法。

譬如选总统，每个人都以自己的考虑，投下自己的一票，但最后由多数人选出的总统，似乎应该好于由一个人指定的总统。;集成学习，就是一种把输入送入多个学习器，再通过某种办法把学习的结果集成起来的办法。

这每一个学习器，也就相应的被称为“弱学习器”。

集成学习最早也叫做“CommitteeVotingMethod”，也就是因为它和投票的过程相似。;弱学习机（weaklearner):对一定分布的训练样本给出假设（仅仅强于随机猜测）

强学习机（stronglearner):根据得到的弱学习机和相应的权重给出假设（最大程度上符合实际情况：almostperfectexpert)

弱学习机强学习机;Classifierensemble;Boosting思想源于

三个臭皮匠，胜过诸葛亮

Findingmanyroughrulesofthumbcanbealoteasierandmoreeffectivethanfindingasingle,hig