6第五章 判别分析.pptVIP

第五章 判别分析 (Discriminate Analysis); 距离判别　 贝叶斯(Bayes)判别 费歇尔(Fisher)判别 逐步判别　　　;一、判别分析的基本思想;判别分析的应用：无处不在 医学： 例1：在医学诊断中，一个病人肺部有阴影，医生要判断他患的是肺结核、肺部良性肿瘤还是肺癌？ 肺结核病人、肺部良性肿瘤病人、肺癌病人组成三个总体，病人来自其中一个总体，可通过病人的指标（阴影大小、边缘是否光滑等）用判别分析判断他来自哪个总体（即判断他患的什么病？） ;经济学： 例2：中小企业的破产模型 为了研究中小企业的破产模型，选定4个经济指标： X1总负债率（现金收益/总负债） X2收益性指标（纯收入/总财产） X3短期支付能力（流动资产/流动负债） X4生产效率性指标（流动资产/纯销售额） 对17个破产企业（1类）和21个正常运行企业（2类）进行了调查，得如下资料： ;总负债率 ;.38 ;.07 ;企业序号 ;二、判别分析的基本要求： 1、分组类型在两组以上； 2、第一阶段每组样本（或案例）个数至少一个以上； 3、解释变量必须是可测量的 三、判别分析与聚类分析的比较： 1、判别分析是在已知研究对象分成若干类型并已取得各种类型的一批已知样本的观测数据，在此基础上根据某些准则建立判别式，然后对未知类型的样本进行判别分类。 2、聚类分析则是对研究对象的类型未知的情况下，对其进行分类的方法。; 3、判别分析和聚类分析往往联合使用。当总体分类不清楚时，先用聚类分析对一批样本进行分类，再用判别分析构建判别式对新样本进行判别。 此外判别分析变量情况： 被解释变量为属性变量； 解释变量是定量变量。;四、判别分析类型及方法 （1）按判别的组数来分，有两组判别分析和多组判别分析 （2）按区分不同总体所用的数学模型来分，有线性判别和非线性判别 （3）按判别对所处理的变量方法不同有逐步判别、序贯判别。 （4）按判别准则来分，有费歇尔判别准则、贝叶斯判别准则 ;本章介绍的主要判别分析方法： 距离判别 贝叶斯(Bayes)判别 费歇尔(Fisher)判别 逐步判别 ;一、距离判别;Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile 5.2.0.0. Copyright 2004-2011 Aspose Pty Ltd.;Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile 5.2.0.0. Copyright 2004-2011 Aspose Pty Ltd.; 则前面的判别法则表示为 ;2、当总体的协方差已知，且不相等;（二）多总体的距离判别法 1、协方差阵相等 设有个K总体，分别有均值向量 (i=1,2,…,k)和协方差阵Σi= Σ，又设Y是一个待判样品。则Y与各总体的距离为（即判别函数）： （与两个总体类似，书101－102页） ; 则距离判别法的判别函数为： ; 2、协方差阵不等 设有个K总体，分别有均值向量 (i=1,2,…,k)和协方差阵不等，又设Y是一个待判样品。则Y与各总体的距离为（即判别函数）： （与两个总体类似，书102页） ;距离判别法的优缺点： 该方法简单实用，但没有考虑到每个总体出现的机会大小，即先验概率，没有考虑到错判的损失。 贝叶斯判别法正是为了解决这两个问题提出的判别分析方法。;三、贝叶斯(Bayes)判别;例1：办公室新来了一个雇员小王，小王是好人还是坏人大家都在猜测。按人们主观意识，一个人是好人或坏人的概率均为0.5。坏人总是要做坏事，好人总是做好事，偶尔也会做一件坏事，一般好人做好事的概率为0.9，坏人做好事的概率为0.2，一天，小王做了一件好事，小王是好人的概率有多大，你现在把小王判为何种人。;Bayes公式：; ;上式两边取对数并去掉与i无关的项，则等价的判别函数为： ; 则判别函数退化为：;令;二、最小平均误判准则：错判损失最小概念作判别函数 【定义】（平均错判损失）;　【定理】若总体G1，G2，?，Gk的先验概率为　　　　　　　　　且相应的密度函数为　　　　　　　，样本来自　而误判为　　的损失为　　　，则划分的Ｂayes解为： 　　 ; 最小错判损失准则的含义是：当抽取了一个未知总体的样