大数据Hadoop该回归理性思考_光环大数据培训.pdfVIP

光环大数据--大数据培训知名品牌 大数据Hadoop 该回归理性思考_光环大数据培训 大数据就是hadoop 吗?当然不是，但是很多人一提到大数据就会立刻想到Hadoop。现 在数据科学家利用海量数据创建数据模型为企业带来的利益是以前所不可想象的，但是数据 的潜力已经被完全挖掘出来了吗，它满足了人们的期待了吗?今天我就从 Hadoop 的历史开 始剥丝抽茧看看它的今天。 Gartner 2015 新兴技术成熟度曲线报告 Gartner 2015 新兴技术成熟度曲线报告的关键点： 1.Big Data 在2014 年还处于泡沫化的底谷期，但是在2015 年的成熟度曲线报告中 已经不见它的身影。 2.物联网连续两年处于过高期望的峰值。 除了Gartner 新兴技术成熟度曲线报告，我们再来看看Big Data 和Hadoop 的谷歌 趋势，如下图： 从图中我们看到，2014-2015 年是一个转折点，这之后Big Data 和Hadoop 的谷歌 趋势开始下降了。 Hadoop 的历史简介 以下内容摘自Alexey Grishchenko 发布的文章： Hadoop 是在谷歌的理念和雅虎的技术下诞生的，主要用来满足互联网公司的分布 光环大数据 光环大数据--大数据培训知名品牌 式计算和存储架构的需求。2003-2008 年是 Hadoop 的萌芽发展期，几乎没有人知道它是什 么，也不知道应该怎么去使用它。 1.2008 年, Google 工程师Christophe Bisciglia 和一群志同道合的朋友一起成立了一个 专门商业化Hadoop 的公司——Cloudera，利用Hadoop 开源产品抢先占领云和数据市场。后 来，他们放弃了云，专注于数据，2009 年，Cloudera 发布了Cloudera Hadoop Distribution 。 他们为 Hadoop 生态的发展做出了很多贡献，连接了开源与业界之间的鸿沟，从Hadoop 的 谷歌趋势中我们也可以看出Hadoop 是从2009 年开始进入高速发展期，这也是Hadoop 第一 次商业尝试。 2.2009 年到2011 年，Cloudera 试图炒热 Hadoop 市场，无奈它的技术受众太少暂 时还难成气候。但是，第一个吃螃蟹的人已经证明了Hadoop 平台的价值，越来越多的玩家 开始加入其中，如MapR 和Hortonworks，一些初创公司和互联网公司也开始使用这一技术。 3.2012 年到2014 年，大规模的营销和企业支持让大数据突然爆红，一跃成为IT 圈 的流行词。2012 年，主流的技术公司花费了 150 多亿美元收购做数据处理和分析的公司。 大数据解决方案大幅增长，但分析市场很难升温。早期的Hadoop 使用企业已经开始玩当时 很有前途的新技术。 4.2014 –2015 年，大数据已经进入到了Gartner 的过高期望峰值。Intel 投资7.6 亿 美元的Cloudera 估值已达41 亿美元，Hortonworks 的估值也高达10 亿美元。大数据领域也 出现了很多新技术，如 Apache Spark 、Apache Flink 、Apache Kafka 等等。IBM 投资3 亿美元 的Apache Spark 也进入到了Gartner 的过高期望的峰值。企业开始大量涌入大数据领域，数 据湖、数据中心以及λ架构等简化传统企业基础设施的解决方案开始大热。 5.2016 年对大数据来说，是一个很有趣的时间点，Cloudera 的估值已经下降了38%， Hortonwork 的估值已经下降了近40% ，这些迫使它们不得不削减专业服务部。Pivotal 放弃 了自己开拓 Hadoop 市场，选择和 Hortonworks 合作，共同开拓市场。这到底是为什么呢?