2大数据时代-思维变革 - 1更多.ppt

1. 大数据时代的思维变革 1. 大数据时代的思维变革——更多 “更多”——不是随机样本，而是全体数据 当数据处理技术已经发生翻天覆地的变化时，在大数据时代进行抽样分析就像在汽车时代骑马一样。一切都改变了，我们需要的是所有的数据，“样本＝总体”。 让数据“发声” 小数据时代的随机采样，最少的数据获得最多的信息 全数据模式，样本＝总体 让数据“发声” 利用所有的数据，而不再仅仅依靠一小部分数据。 数据的收集 过去，因为记录、储存和分析数据的工具不够好，我们只能收集少量数据进行分析，这让我们一度很苦恼。 数据的处理工具 为了让分析变得简单，我们会把数据量缩减到最少。这是一种无意识的自省：我们把与数据交流的困难看成是自然的，而没有意识到这只是当时技术条件下的一种人为的限制。 统计学：用尽可能少的数据来证实尽可能重大的发现。 小数据时代的随机采样 在过去，只有教会或者政府才拥有大规模收集和分类数据的能力。 人口普查——一项耗资且费时的事情 三百多年前，一个名叫约翰·格朗特John Graunt的英国缝纫用品商提出了一个很有新意的方法。他采用了一个新方法推算出鼠疫时期伦敦的人口数，这种方法就是后来的统计学。 古罗马在拥有数十万人口的时候每5年一次 美国宪法规定每10年一次 1880年，8年 1890年，预计13年，穿孔卡片用了1年 事实证明，问题的