判别分之析-4.pptVIP

判 别 分 析 距离判别 贝叶斯判别 § 1. 判 别 分 析 判别分析 是用于判断样品所属类型的一种统计分析方法。 判别分析问题 设总体G1,,,Gk分布特征已知，对一个新样本X要判断其来自哪个总体？ 判别分析内容 两组和多组（组数区分） 线性和非线性（总体数模区分） 逐步判别和序贯判别（处理变量区分） 判别准则 马氏距离最小准则 Fisher准则 平均损失最小准则 最小平方准则 最大似然准则。。。。 判别分析方法 距离判别法 贝叶斯判别法 Fisher判别法 逐步判别法。。。。。 判别分析产生于20世纪30年代。在自然科学、社会学及经济管理学科中都有广泛的应用。 判别分析的特点是根据已掌握的、历史上每个类别的若干样本的数据信息，总结出客观事物分类的规律性，建立判别公式和判别准则。当遇到新的样本点时，只要根据总结出来的判别公式和判别准则，就能判别该样本点所属的类别。 例 中小企业的破产模型 为了研究中小企业的破产模型，选定4个经济指标： X1总负债率（现金收益/总负债） X2收益性指标（纯收入/总财产） X3短期支付能力（流动资产/流动负债） X4生产效率性指标（流动资产/纯销售额） 对17个破产企业（1类）和21个正常运行企业（2类）进行了调查，得如下资料： §2 距离判别 首要问题 是否能够构造一个恰当的距离函 数，通过样本与某总体（类别）之间距离的 大小，判别其所属总体（类别）。 如何表示样本和总体的距离？ 设 是从期望μ= 和方差阵Σ= 的总体G抽得的两个观测值，则称 马氏距离和欧式距离之间的差别 马氏距离的特点： 3.若变量之间是相互无关的，则协方差矩阵为对角矩阵 例1 在企业的考核中，可以根据企业的生产经营情况把企业分为优秀企业和一般企业。考核企业经营状况的指标有： 资金利润率=利润总额/资金占用总额 劳动生产率=总产值/职工平均人数 产品净值率=净产值/总产值 三个指标的均值向量和协方差矩阵如下。现有二个企业，观测值分别为 （7.8，39.1，9.6）和（8.1，34.2，6.9），问这两个企业应该属于哪一类？ §3 贝叶斯判别法 Bayes 判别法的基本思想总假定对所研究的对象已有 一定的认识，用先验概率来描述这种认识. 然后抽取 一个样本，用样本来修正已有的认识，得到后验概率. 举例：办公室新来了一个雇员小王，小王是好人还是坏人大家都在猜测。按人们主观意识，一个人是好人或坏人的概率均为0.5。坏人总是要做坏事，好人总是做好事，偶尔也会做一件坏事，一般好人做好事的概率为0.9，坏人做好事的概率为0.2，一天，小王做了一件好事，小王是好人的概率有多大，你现在把小王判为何种人。。 判别规则 二. 最小平均误判代价准则 平均错判损失定义： 定理 若总体G1，G2，?，Gk的先验概率为 含义：当抽取了一个未知总体的样品值x，要判别它属于那个总体，只要先计算出k个按先验概率加权的误判平均损失 可见，要使ECM最小，被积函数必须在D1是负数，则有分划 特别： 设有总体 ， 具有概率密度函数 。根据以往的统计分析知 出现的概率为 （先验概率） 。则当样本 发生时，求他属于某类的概率。由贝叶斯公式计算后验概率： 则 判给 。 一. 最大后验准则 则 判给 。 上式两边取对数并去掉与i无关的项，则等价的判别函数为： 特别在正态总体的假定下， 为正态分布的密度函数。 问题转化为若