【互联网+】大数据思维的十大原理.docx

【互联网+】大数据思维的十大原理 从流程核心转变为数据核心 大数据时代，计算模式也发生了转变，从流程核心转变为数据核心Hadoop体系的分布式计算框架已经是数据为核心的范式非结构化数据及分析需求，将改变IT系统的升级方式：从简单增量到架构变化大数据下的新思维计算模式的转变 科学进步越来越多地由数据来推动，海量数据给数据分析既带来了机遇，也构成了新的挑战大数据往往是利用众多技术和方法，综合源自多个渠道不同时间的信息而获得的为了应对大数据带来的挑战，我们需要新的统计思路和计算方法 由功能是价值转变为数据是价值 大数据真正有意思的是数据变得在线了，这个恰恰是互联网的特点非互联网时期的产品，功能一定是它的价值，今天互联网的产品，数据一定是它的价值 数据能告诉我们，每一个客户的消费倾向，他们想要什么，喜欢什么，每个人的需求有哪些区别，哪些又可以被集合到一起来进行分类大数据是数据数量上的增加，以至于我们能够实现从量变到质变的过程举例来说，这里有一张照片，照片里的人在骑马，这张照片每一分钟，每一秒都要拍一张，但随着处理速度越来越快，从1分钟一张到1秒钟1张，突然到1秒钟10张后，就产生了电影当数量的增长实现质变时，就从照片变成了一部电影 用数据价值思维方式思考问题，解决问题信息总量的变化导致了信息形态的变化，量变引发了质变，最先经历信息爆炸的学科，如天文学和基因学，创造出了大数据这个概念如今，这个概念几乎应用到了所有人类致力于发展的领域中从功能为价值转变为数据为价值，说明数据和大数据的价值在扩大，数据为王的时代出现了数据被解释是信息，信息常识化是知识，所以说数据解释数据分析能产生价值 从抽样转变为需要全部数据样本 需要全部数据样本而不是抽样，你不知道的事情比你知道的事情更重要，但如果现在数据足够多，它会让人能够看得见摸得着规律数据这么大这么多，所以人们觉得有足够的能力把握未来，对不确定状态的一种判断，从而做出自己的决定这些东西我们听起来都是非常原始的，但是实际上背后的思维方式，和我们今天所讲的大数据是非常像的 在大数据时代，无论是商家还是信息的搜集者，会比我们自己更知道你可能会想干什么现在的数据还没有被真正挖掘，如果真正挖掘的话，通过信用卡消费的记录，可以成功预测未来5年内的情况统计学里头最基本的一个概念就是，全部样本才能找出规律为什么能够找出行为规律？一个更深层的概念是人和人是一样的，如果是一个人特例出来，可能很有个性，但当人口样本数量足够大时，就会发现其实每个人都是一模一样的 用全数据样本思维方式思考问题，解决问题从抽样中得到的结论总是有水分的，而全部样本中得到的结论水分就很少，大数据越大，真实性也就越大，因为大数据包含了全部的信息 由关注精确度转变为关注效率 关注效率而不是精确度，大数据标志着人类在寻求量化和认识世界的道路上前进了一大步，过去不可计量存储分析和共享的很多东西都被数据化了，拥有大量的数据和更多不那么精确的数据为我们理解世界打开了一扇新的大门大数据能提高生产效率和销售效率，原因是大数据能够让我们知道市场的需要，人的消费需要大数据让企业的决策更科学，由关注精确度转变为关注效率的提高，大数据分析能提高企业的效率 竞争是企业的动力，而效率是企业的生命，效率低与效率高是衡量企来成败的关键一般来讲，投入与产出比是效率，追求高效率也就是追求高价值手工机器自动机器智能机器之间效率是不同的，智能机器效率更高，已能代替人的思维劳动智能机器核心是大数据制动，而大数据制动的速度更快在快速变化的市场，快速预测快速决策快速创新快速定制快速生产快速上市成为企业行动的准则，也就是说，速度就是价值，效率就是价值，而这一切离不开大数据思维 大数据思维有点像混沌思维，确定与不确定交织在一起，过去那种一元思维结果，已被二元思维结果取代过去寻求精确度，现在寻求高效率；过去寻求因果性，现在寻求相关性；过去寻找确定性，现在寻找概率性，对不精确的数据结果已能容忍只要大数据分析指出可能性，就会有相应的结果，从而为企业快速决策快速动作创占先机提高了效率 由因果关系转变为关注相关性 关注相关性而不是因果关系，社会需要放弃它对因果关系的渴求，而仅需关注相关关系，也就是说只需要知道是什么，而不需要知道为什么这就推翻了自古以来的惯例，而我们做决定和理解现实的最基本方式也将受到挑战 大数据思维一个最突出的特点，就是从传统的因果思维转向相关思维，传统的因果思维是说我一定要找到一个原因，推出一个结果来而大数据没有必要找到原因，不需要科学的手段来证明这个事件和那个事件之间有一个必然，先后关联发生的一个因果规律它只需要知道，出现这种迹象的时候，我就按照一般的情况，这个数据统计的高概率显示它会有相应的结果，那么我只要发现这种迹象的时候，我就可以去做一个决策，我该怎么做这是和以前的思维方式很不