【精选】【大数据时代】——数据分析在路上.pdf

大数据时代——数据分析在路上 大数据时代——数据分析在路上 大大数数据据时时代代————数数据据分分析析在在路路上上 [英] 维克托·迈尔-舍恩伯格（Viktor Mayer-Schonberger） [英] 肯尼思库克耶(Kenneth) 著 2013-5-16 Leven 书评： 正如书的标题 A revolution that will transform how we live，work，and think 所说 一样，大数据时代已经到来，它正悄悄改变我们生存的环境，不断地从商业、学习、生活等 各个角度影响我们的行为方式，在这个快速且复杂变换的信息时代，我们需要一个更精准的 方法去决策人们的行动，大数据正在以划时代意义的让人们崛起，构造一种全新的思维模式， 做更好的决定。 接收新的理念，那就是从因果关系到相关关系的思维变革，建立在相关关系分析法基础上 的预测这是大数据的核心。可能我们暂时无法理解全体数据而不是样本数据的处理方法；不 能理解要效率而不是绝对精准的处理理念；更不能接受不追求因果这个决定性的关系而去寻 找相关关系的处理导向；《大数据时代》能告诉你为什么我们要有这样的转变，而这样的转 变能带来多少好处，IBM、谷歌、亚马逊、阿里等这些商业巨头已经开始做了很多成功大数 交流 交流 据处理案例，他们引领我们走向崭新的大数据世界，你还在等什么，数据分析在路上（交交流流 群：158328722 群：158328722 群群：：115588332288772222），我们晃晃悠悠！ 序 序 序序 � 大数据时代处理数据理念上的三大转变： （1）要全体不要抽样 （2）要效率不要绝对精确 （3）要相关不要因果 � 努力在可以应用、可以拓展的地方，应用它、拓展它；在不能应用、不能拓展的地方， 就停下来。 引言 一场生活、工作与思维的大变革 引言 一场生活、工作与思维的大变革 引引言言 一一场场生生活活、、工工作作与与思思维维的的大大变变革革 � 大数据是人们在大规模数据的基础上可以做到的事情，而这些事情在小规模数据的基础 上是无法完成的。 � 大数据的核心就是预测。它通常被视为人工智能的一部分，或者更确切地说，被视为一 种机器学习。 � 大数据的核心代表着我们分析信息时的三个转变： （1）在大数据时代，我们可以分析更多的数据，有时候甚至可以处理和某个特别现象相关 的所有数据，而不是依赖于随机采样。 （2）研究数据如此之多，以至于我们不再热衷于追求精确度 （3）第三个转变因前两个转变而促成，即我们不再热衷于寻找因果关系 第一部分 大数据时代的思维变革 第一部分 大数据时代的思维变革 第第一一部部分分 大大数数据据时时代代的的思思维维变变革革 1. 更多——不是随机采样，而是全体数据 1. 更多——不是随机采样，而是全体数据 11.. 更更多多————不不是是随随机机采采样样，，而而是是全全体体数数据据 1.1 大数据与三个重大的思维转变有关，这个三个转变是相互关系和相互作用的： （1）首先，要分析与某事物相关的所有数据，而不是依靠分析少量的数据样本 （2）其次，我们乐于接受数据的纷繁复杂，而不是追求精确性 （3）最后，我们的思想发生了转变，不再探求难以捉摸的因果关系，转而关注事物的相关 关系 1.2 随机采样不适合考察子类别的情况，因为一旦继续细分，随机采样结果的错误率会大大 增加。 1.3 全数据模式，样本=总体 1.4 多样性是有额外价值的 2. 更杂——不是精确性，而是混杂性 2. 更杂——不是精确性，而是混杂性 22.. 更更杂杂————不不是是精精确确性性，，而而是是混混杂杂性性 2.1 测量就是认知 2.2 错误并不是大数据固有的特性，而是一个需我们去处理的现实问题，并且有可能长期存 在。 2.3 要想获得大规模数据带来的好处，混乱应该是一种标准途径，而不应该是