【大数据时代】——数据分析在路上【大数据时代】——数据分析在路上.pdfVIP

大数据时代——数据分析在路上 [英] 维克托·迈尔-舍恩伯格（Viktor Mayer-Schonberger） [英] 肯尼思库克耶(Kenneth) 著 2013-5-16 Leven 书评： 正如书的标题 A revolution that will transform how we live，work，and think 所说 一样，大数据时代已经到来，它正悄悄改变我们生存的环境 ，不断地从商业、学习、生活等 各个角度影响我们的行为方式 ，在这个快速且复杂变换的信息时代 ，我们需要一个更精准的 方法去决策人们的行动，大数据正在以划时代意义的让人们崛起 ，构造一种全新的思维模式， 做更好的决定。 接收新的理念，那就是从因果关系到相关关系的思维变革 ，建立在相关关系分析法基础上 的预测这是大数据的核心。可能我们暂时无法理解全体数据而不是样本数据的处理方法 ；不 能理解要效率而不是绝对精准的处理理念 ；更不能接受不追求因果这个决定性的关系而去寻 找相关关系的处理导向；《大数据时代》能告诉你为什么我们要有这样的转变，而这样的转 变能带来多少好处，IBM、谷歌、亚马逊、阿里等这些商业巨头已经开始做了很多成功大数 据处理案例，他们引领我们走向崭新的大数据世界 ，你还在等什么，数据分析在路上（交流 群：158328722），我们晃晃悠悠！ 序 ? 大数据时代处理数据理念上的三大转变： （1）要全体不要抽样 （2）要效率不要绝对精确 （3）要相关不要因果 ? 努力在可以应用、可以拓展的地方，应用它、拓展它；在不能应用、不能拓展的地方 ， 就停下来。 引言 一场生活、工作与思维的大变革 ? 大数据是人们在大规模数据的基础上可以做到的事情 ，而这些事情在小规模数据的基础 上是无法完成的。 ? 大数据的核心就是预测。它通常被视为人??智能的一部分 ，或者更确切地说，被视为一 种机器学习。 ? 大数据的核心代表着我们分析信息时的三个转变： （1）在大数据时代，我们可以分析更多的数据 ，有时候甚至可以处理和某个特别现象相关 的所有数据，而不是依赖于随机采样。 （2）研究数据如此之多，以至于我们不再热衷于追求精确度 （3）第三个转变因前两个转变而促成，即我们不再热衷于寻找因果关系 第一部分 大数据时代的思维变革 1. 更多——不是随机采样，而是全体数据 1.1 大数据与三个重大的思维转变有关，这个三个转变是相互关系和相互作用的： （1）首先，要分析与某事物相关的所有数据，而不是依靠分析少量的数据样本 （2）其次，我们乐于接受数据的纷繁复杂，而不是追求精确性 （3）最后，我们的思想发生了转变，不再探求难以捉摸的因果关系 ，转而关注事物的相关 关系 1.2 随机采样不适合考察子类别的情况 ，因为一旦继续细分，随机采样结果的错误率会大大 增加。 1.3 全数据模式，样本=总体 1.4 多样性是有额外价值的 2. 更杂——不是精确性，而是混杂性 2.1 测量就是认知 2.2 错误并不是大数据固有的特性 ，而是一个需我们去处理的现实问题 ，并且有可能长期存 在。 2.3 要想获得大规模数据带来的好处，混乱应该是一种标准途径，而不应该是竭力避免的 2.4 清楚的分类被更混乱却更灵活的机制所取代了 2.5 在大数据里，宽容错误会给我们带来更多价值 2.6 这些传统观念更加基本，往往被认为是社会建立的根基