课件贝叶斯定理.docVIP

贝叶斯定理 (重定向自后验概率) 为了阅读方便，本文使用标题手工转换。 转换标题为：简体：贝叶斯定理；繁體：貝氏定理； 实际标题为：贝叶斯定理；当前显示为：贝叶斯定理 为了阅读方便，本文使用全文手工转换。转换内容： 简体：贝叶斯定理；繁體：貝氏定理； 当前用字模式下显示为→贝叶斯定理 字词转换是中文维基的一项自动转换，目的是通过计算机程序自动消除繁简、地区词等不同用字模式的差异，以达到阅读方便。字词转换包括全局转换和手动转换，本说明所使用的标题转换和全文转换技术，都属于手动转换。 如果您想对我们的字词转换系统提出一些改进建议，或者提交应用面更广的转换（中文维基百科全站乃至MediaWiki软件），或者报告转换系统的错误，请前往Wikipedia:字词转换请求或候选发表您的意见。 贝叶斯定理（Bayes theorem），是概率论中的一个结果，它跟随机变量的条件概率以及边缘概率分布有关。在有些关于概率的解说中，贝叶斯定理(贝叶斯更新）能够告知我们如何利用新证据修改已有的看法。 通常，事件A在事件B(发生)的条件下的概率，与事件B在事件A的条件下的概率是不一样的；然而，这两者是有确定的关系,贝叶斯定理就是这种关系的陈述。 作为一个规范的原理，贝叶斯定理对于所有概率的解释是有效的；然而，频率主义者和贝叶斯主义者对于在应用中，概率如何被赋值，有着不同的看法： 频率主义者根据随机事件发生的频率，或者总体样本里面的个数来赋值概率；贝叶斯主义者要根据未知的命题来赋值概率。一个结果就是，贝叶斯主义者有更多的机会使用贝叶斯定理。本文深度讨论了这些争论。 贝叶斯定理的陈述 贝叶斯定理是关于随机事件A和B的条件概率和边缘概率的一则定理。 其中P(A|B)是在B发生的情况下A发生的可能性。 在贝叶斯定理中，每个名词都有约定俗成的名称： P(A)是A的先验概率或边缘概率。之所以称为先验是因为它不考虑任何B方面的因素。 P(A|B)是已知B发生后A的条件概率，也由于得自B的取值而被称作A的后验概率。 P(B|A)是已知A发生后B的条件概率，也由于得自A的取值而被称作B的后验概率。 P(B)是B的先验概率或边缘概率，也作标准化常量（normalized constant）. 按这些术语，Bayes定理可表述为： 后验概率 = (相似度 * 先验概率)/标准化常量 也就是说，后验概率与先验概率和相似度的乘积成正比。 另外，比例P(B|A)/P(B)也有时被称作标准相似度（standardised likelihood），Bayes定理可表述为： 后验概率 = 标准相似度 * 先验概率 从条件概率推导贝叶斯定理 根据条件概率的定义 . 在事件B发生的条件下事件 A发生的概率是 同样地, 在事件A发生的条件下事件 B发生的概率 整理与合并这两个方程式, 我们可以找到 这个引理有时称作概率乘法规则.上式两边同除以P(B), 若P(B)是非零的, 我们可以得到贝叶斯 定理: 二中择一的形式 贝叶斯定理通常可以再写成下面的形式： 其中AC是A的补集（即非A）。故上式亦可写成： 在更一般化的情况，假设{Ai}是事件集合里的部份集合，对于任意的Ai，贝叶斯定理可用下式表示： 以可能性与相似率表示贝叶斯定理 贝叶斯定理亦可由相似率Λ和可能性O表示： 其中 定义为B发生时，A发生的可能性（odds）； 则是A发生的可能性。相似率（Likelihood ratio）则定义为： 贝叶斯定理与概率密度 贝叶斯定理亦可用于连续机率分布。由于概率密度函数严格上并非机率，由机率密度函数导出贝叶斯定理观念上较为困难。贝叶斯定理与机率密度的关系是由求极限的方式建立： 全机率定理则有类似的论述： 如同离散的情况，公式中的每项均有名称。 f(x, y)是X和Y的联合分布； f(x|y) 是给定Y=y后，X的后验分布； f(y|x) = L(x|y)是Y=y后，X的相似度函数（为x的函数)； f(x) 和f(y)则是X和Y的边际分布； f(x)则是X的先验分布。 为了方便起见，这里的f在这些专有名词中代表不同的函数（可以由引数的不同判断之）。 贝叶斯定理的推广 对于变量有二个以上的情况，贝式定理亦成立。例如： 这个式子可以由套用多次二个变量的贝式定理及条件机率的定义导出： 一般化的方法则是利用联合机率去分解待求的条件机率，并对不加以探讨的变量积分（意即对欲探讨的变量计算边缘机率）。取决于不同的分解形式，可以证明某些积分必为1，因此分解形式可被简化。利用这个性质，贝叶斯定理的计算量可能可以大幅下降。贝氏网络为此方法的一个例子，贝氏网络指定数个变量的联合机率分布的分解型式，该机率分布满足下述条件：当其他变量的条件机率给定时，该变量的条件机率为一简单型式。 范例 吸毒者检测 贝叶斯定理