大数据时代思维变革更好课件.pptxVIP

4大数据时代-思维变革

---3更好;1.大数据时代的思维变革——更好;1997年，24岁的格雷格·林登（GregLinden）在华盛顿大学就读博士，研究人工智能，闲暇之余，他会在网上卖书。他的网店

运营才两年就已经生意兴隆。

林登被亚马逊聘为软件工程师，以确保网站的正常运行。

詹姆斯·马库斯（Jamesarcus）回忆说：“推荐信息往往为你提供与你以前购买物品有微小差异的产品，并且循环往复。”詹姆斯

·马库斯从1996年到2001年都是亚马逊的书评家，在他的回忆录《亚马逊》（Amazonia）里，他说道：“那种感觉就像你和一群脑残在一起逛书店。”

据说亚马逊销售额的三分之一都是来自于它的个性化推荐系统。;在大数据时代之前，相关关系的应用很少。因为数据很少而且收集数据很费时费力，所以统计学家们喜欢找到一个关联物，

然后收集与之相关的数据进行相关关系分析来评测这个关联物的优劣。那么，如何寻找这个关联物呢？

除了仅仅依靠相关关系，专家们还会使用一些建立在理论基础上的假想来指导自己选择适当的关联物。这些理论就是一些抽象的观点，关于事物是怎样运作的。然后收集与关联物相关的数据来进行相关关系分析，以证明这个关联物是否真的合适。如果不合适，人们通常会固执地再次尝试，因为担心可能是数据收集的错误，而最终却不得不承认一开始的假想甚至假想建立的基础都是有缺陷和必须修改的。这种对假想的反复试验促进了学科的发展。但是这种发展非常缓慢，因为个人以及团体的偏见会蒙蔽我们的双眼，导致我们在设立假想、应用假想和选择关联物的过程中犯错误。总之，这是一个烦琐的过程，只适用于小数据时代。;大数据时代的相关关系

–谷歌流感预测：5亿个数学模型

建立在相关关系分析法基础上的预测是大数据的核心。

数据驱动的关于大数据的相关关系分析法，取代了基于假想的易出错的方法。大数据的相关关系分析法更准确、更快，而且不易受偏见的影响。;实例

FICO提出“遵从医嘱评分”

一系列变量→是否按时吃药

益百利预测个人收入

–信用卡交易记录→预测个人收入1$

–证明一个人的收入状况10$

中英人寿保险公司申请人的健康隐患

信用报告、市场分析报告→高血压、糖尿病和抑郁症5$

血液尿液样本130$

美国折扣零售商塔吉特怀孕预测;UPS与汽车修理预测

UPS国际快递公司从2000年就开始使用预测性分析来监测自己全美60000辆车规模的车队，这样就能及时地进行防御性的修理。如果车在路上抛锚损失会非常大，因为那样就需要再派一辆车，会造成延误和再装载的负担，并消耗大量的人力物力，所以以前UPS每两三年就会对车辆的零件进行定时更换。但这种方法不太有效，因为有的零件并没有什么毛病就被换掉了。通过监测车辆的各个部位，UPS如今只需要更换需要更换的零件，从而节省了好几百万美元。有一次，监测系统甚至帮助UPS发现了一个新车的一个零件有问题，因此免除了可能会造成的困扰。; 当收集、存储和分析数据的成本较高的时候，应该适当地丢弃一些数据。

医疗设备获取病人的数据

安大略理工大学IBM医院

卡罗琳·麦格雷戈

检测处理即时的病人信息早产儿病情诊断

16个数据点1260/秒

在明显感染症状出现的24小时之前，可发现

早产儿的稳定是病情感染前的准备..;幸福的非线性关系

多年来，经济学家和政治家一直错误地认为收入水平和幸福感是成正比的。我们从数据图表上可以看到，虽然统计工具呈现的是一种线性关系，但事实上，它们之间存在一种更复杂的动态关系：对于收入水平在1万美元以下的人来说，一旦收入增加，幸福感会随之提升；但对于收入水平在1万美元以上的人来说，幸福感并不会随着收入水平提高而提升。如果能发现这层关系，我们看到的就应该是一条曲线，而不是统计工具分析出来的直线。

当我们说人类是通过因果关系了解世界时，我们指的是我们在理解和解释世界各种现象时使用的两种基本方法：一种是通过快速、虚幻的因果关系，还有一种就是通过缓慢、有条不紊的因果关系。大数据会改变这两种基本方法在我们认识世界时所扮演的角色。;;–弗雷德的父母迟到了；;事实证明，一般来说，人被狂犬病狗咬后患上狂犬病的概率只有七分之一。即使巴斯德的疫苗有效，这也只适用于七分之一

的案例中。无论如何，就算没有狂犬疫苗，这个小男孩活下来的概率还是有85%。;例如，Kaggle，一家为所有人提供数据挖掘竞赛平台的公司，举办了关于二手车的质量竞赛。二手车经销商将二手车数据提

供给参加比赛的统计学家，统计学家们用这些数据建立一个算法系统来预测经销商拍卖的哪些车有可能出现质量问题。相关关系分析表明，橙色的车有质量问题的可能性只有其他车的一半。

当我们读到这里的时候，不禁也会思考其中的原因。难道是因为橙色车的车主更爱车，所以车被保护得更好吗？或是这种颜色的车子