「深度推荐」玩转贝叶斯分析.pdfVIP

「深度推荐」玩转贝叶斯分析 开头先开个玩笑， 有人说 信贝爷，“ 得永生 ”你是否理解此中真意？ 贝叶斯分析是整个机器学习的基础框架， 它的思想之深刻远出一般人所认知的， 我们这里要从 贝 叶斯统计 说起。 贝叶斯统计 首先谈概率，概率这件事大家都觉得自己很熟悉， 叫你说概率的定义 ， 你却不一定说的出，我们中 学课本里说概率这个东西表述是一件事发生的频率， 或者说这叫做客观概率。 而贝叶斯框架下的概率理论确从另一个角度给我们展开了答案， 他说 概率是我们个人的一个主观 概念， 表明我们对某个事物发生的相信程度。 如同 Pierre Lapalace 说的： Probability theory is nothing but common sense reduced to calculation. 这正是贝叶斯流派的核心，换句话说， 它解决 的是来自外部的信息与我们大脑内信念的交互关系。 两种对于概率的解读区别了频率流派和贝叶斯流派。如果你不理解主观概率就无法理解贝叶斯定律 的核心思想。 我们来看一下贝叶斯统计的一个有趣的案例案例：假如你是一个女生， 你在你的老公书包里发现了 一个别的女人的内裤那么他出轨的概率是多少。 稍微熟悉这个问题的人对会知道做这个题目你要先考察基率，你要把这个问题分解为几步考虑： 在这里 1其实就是先验概率 P （A ），而 2是条件概率 P （B|A ）， 最终得到 3 后验概率 P （A|B ）。 这三种即是贝叶斯统计的三要素。 基于条件概率的贝叶斯定律数学方程极为简单： A 即出轨， B 是内裤出现， 你得到 1 、2 ，就可以根据公式算出根据根据内裤出现判断出轨的概率。 先验概率在贝叶斯统计中具有重要意义，首先先验概率即我们在取得证据之前所指定的概率 P （A ）， 这个值通常是根据我们之前的常识，带有一定的主观色彩。 就像刚刚说的出轨的问题， 你的先验概率代表了你对你男人的信心。 有一个非常有趣的现象是如果我们的先验概率审定为 1或 0 （即肯定或否定某件事发生）， 那么无 论我们如何增加证据你也依然得到同样的条件概率（此时 P （A ）=0 或 1 ， P （A|B ）= 0 或 1） 这 告诉我们的第一个经验就是不要过早的下论断， 下了论断你的预测也就无法进化了， 或者可以称 之为信仰。 你如果想让你的认知进步，就要给各种假设留一点空间。 贝叶斯分析 贝叶斯分析的思路对于由证据的积累来推测一个事物发生的概率具有重大作用， 它告诉我们当我们 要预测一个事物， 我们需要的是首先根据已有的经验和知识推断一个先验概率， 然后在新证据不断 积累的情况下调整这个概率。整个通过积累证据来得到一个事件发生概率的过程我们称为 贝叶斯分 析 。 贝叶斯分析中的三要素（即刚讲的贝叶斯统计三要素）在不同的问题中通常侧重点 ， 很多时候我们 都是在忽略先验概率的作用，比如描述一个人很书呆子气让你判断他是大学老师还是销售员的经典 案例（要看先验大学老师还是销售员哪个多啊）。 但是有时候我们也不理解条件概率， 比如著名 的辛普森案， 为了证明辛普森有杀妻之罪，检方说辛普森之前家暴，而辩护律师说，美国有 400 万 女性被丈夫或男友打过，而其中只有 1432 人被杀，概率是 2800 分之一。 这其实就是勿用了后验 概率， 这里的条件是被杀而且有家暴，而要推测的事件是凶手是男友（事实上概率高达 90% ），这 才是贝叶斯分析的正当用法， 而辩护