大数据技术及应用培训.PPTVIP

大数据时代 “更杂”-满足精确性，包容混杂性 执迷于精确性是信息缺乏时代和模拟时代的产物。只有5%的数据是有框架且能适用于传统数据库的。如果不能接受混乱，剩下95%的非框架数据都无法被利用，只有接受不精确性，我们才能打开一扇从未涉足的世界的窗户。 允许不精确 大数据的简单算法比小数据的复杂算法更有效 纷繁的数据越多越好 混杂性，不是竭力避免，而是标准途径 新的数据库设计的诞生 大数据时代的思维变革 大数据时代 “更好”-不是因果关系，而是相关关系 知道“是什么”就够了，没必要知道“为什么”。在大数据时代，我们不必非得知道现象背后的原因，而是要让数据自己“发声”。 关联物，预测的关键 “是什么”，而不是“为什么” 改变，从操作方式开始 大数据，改变人类探索世界的方法 大数据时代的思维变革 大数据时代 大数据时代的商业变革 “数据化”-一切皆可“量化” 大数据发展的核心动力来源于人类测量、记录和分析世界的渴望。信息技术变革随处可见，但是如今信息技术变革的重点在“T”（技术）上，而不是在“I”(信息）上。现在，我们是时候把聚光灯打向“I”，开始关注信息本身了。 数据，从最不可能的地方提取出来 数据化，不是数字化 量化一切，数据化的核心 当文字变成数据 当方位变成数据 当沟通成为数据 一切事物的数据化 大数据时代 大数据时代的商业变革 “价值”-“取之不尽，用之不竭”的数据创新 数据就像一个神奇的钻石矿，当它的首要价值被发掘后仍能不断给予。它的真实价值就像漂浮在海洋中的冰山，第一眼只能看到冰山的一角，而绝大部分都隐藏在表面之下。 数据创新1：数据的再利用 数据创新2：重组数据 数据创新3：可扩展数据 数据创新4：数据的折旧值 数据创新5：数据废气 数据创新6：开放数据 给数据估值 大数据时代 大数据时代的商业变革 “角色定位”-数据、技术与思维的三足鼎立 微软以1.1亿美元的价格购买了大数据公司Farecast，而两年后谷歌则以7亿美元的价格购买了给Farecast提供数据的ITA Software公司。如今，我们正处在大数据时代的早期，思维和技术是最有价值的，但是最终大部分价值还是必须从数据本身来挖掘。 大数据价值的3大构成 大数据掌控公司 大数据技术公司 大数据思维公司和个人 全新的数据中间商 专家的消亡与数据科学家的崛起 大数据，决定企业的竞争力 大数据时代 大数据时代的管理变革 “风险”-让数据主宰一切的隐忧 我们时刻都暴露在“第三只眼”之下：亚马逊监视着我们的购物习惯，谷歌监视着我们的网页浏览习惯，而微博似乎什么都知道，不仅窃听到了我们心中的“TA”，还有我们的社交关系网。 无处不在的“第三只眼” 我们的隐私被二次利用了 预测与惩罚，不是因为“所做”，而是因为“将做” 数据独裁 挣脱大数据的困境 大数据时代 “掌控”-责任与自由并举的信息管理 当世界开始迈向大数据时代时，社会也将经历类似的地壳运动。在改变人类基本的生活与思考方式的同时，大数据早已在推动人类信息管理准则上重新定位。然而，不同于印刷革命，我们没有几个世纪的时间去适应，我们也许只有几年时间。 管理变革1：隐私保护，从个人许可到让数据使用者承担责任 管理变革2：个人动因VS预测分析 管理变革3：打破黑盒子，大数据程序员的崛起 管理变革4：企业和行业应用突破 大数据时代的管理变革 大数据时代 正在发生的未来 大数据并不是一个充斥着算法和机器的冰冷世界，人类的作用依然无法被完全替代。大数据为我们提供的不是最终答案，只是参考答案，帮助是暂时的，而更好的方法和答案还在不久的未来。 1 2 3 大数据应用 目 录 大数据技术 大数据时代 大数据技术 认知 初识 大数据算法与理论 大数据系统与实践 NoSQL Hadoop 大数据带来的思维变化 大数据带来的价值链 大数据发展现状与未来 大数据 vs 人类 什么是大数据 大数据的特性 大数据与传统技术的关系 大数据与其他新兴技术的关系 深入 大数据技术 什么是大数据 百度百科：大数据(big data)，或称巨量资料，指的是所涉及的资料量规模巨大到无法透过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。 维基百科：大数据是由数量巨大、结构复杂、类型众多数据构成的数据集合，是基于云计算的数据处理与应用模式，通过数据的整合共享，交叉复用形成的智力资源和知识服务能力。 学术观点：大数据是由大量异构的数据组成的数据集合，它是可以应用合理的数学算法或工具从中找出有价值的信息，为人们带来利益的一门新兴学科。 大数据技术 2009年，甲型H1N1流感在全球爆发传播，为了发现和控制疫情，各国政府和卫生相关部门