[数理分析.pptVIP

定理1：设有 个总体： ，已知 的联合密度函数为 ，先验概率为 ，错判损失为 ，则贝叶斯（Bayes）判别的解 为 其中 ……（6） 下面给出贝叶斯（Bayes）判别的解的主要结论 ： Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile . Copyright 2004-2011 Aspose Pty Ltd. Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile . Copyright 2004-2011 Aspose Pty Ltd. 3.3 费希尔判别 费希尔判别的基本思想：借助于方差分析的思想，利用投影将 元的数据投影到某一个方向，使得投影后组与组之间的差异尽可能的大，然后根据一定的判别规则对新样本的类别进行判断。 首先构造一个线性判别函数 ……（7） 可见上面的函数将 元的数据投影到了一个方向，系数 的确定原则是使得总体间的差异最大，总体内部的离差最小。 Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile . Copyright 2004-2011 Aspose Pty Ltd. Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile . Copyright 2004-2011 Aspose Pty Ltd. A.确定线性判别函数 设有 个 元总体： ，它们的均值为： ；协方差为： 。 在 的条件下，有 令 这里 确定 ，使得 个总体间的差异最大，总体内部的离差最小，则 应该达到最大。 Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile . Copyright 2004-2011 Aspose Pty Ltd. Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile . Copyright 2004-2011 Aspose Pty Ltd. 为了确保 的唯一性，不妨设 。因此，问题转化为：在条件 约束下，求 使得 式达到最大——这是大家非常熟悉的条件极值的问题。根据拉格朗日乘子法： 求解得 ……（8） 由方程（8）第一式知， 是 的特征根， 是相应的特征向量。可以证明 （ 的大小可以衡量判别函数 的判别效果，故称 为判别效率）。设 的非零特征根为 ，相应的满足约束条件的特征向量为 ，显然，取 时 达到最大。 Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile . Copyright 2004-2011 Aspose Pty Ltd. Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile . Copyright 2004-2011 Aspose Pty Ltd. 数 学 建 模 培 训 第 十 章 多元统计分析 第 十 章 多元统计分析 主 讲：孙 中 奎 Evaluation only. Created with Aspose.Slides for .NET 3.5 Client Profile . Copyright 2004-2011 Aspose Pty Ltd. Evaluation on