大数据专题重点分析.pptVIP

产生新的用户量、给用户产生行为指纹 用户在线的每一次点击，每一次评论，每一个视频点播，就是大数据的典型来源。互联网企业之所以取得令人瞩目的成绩，其核心的本质就是包括用户网络操作的大数据，进行记录和分析，形成用户“行为指纹”，从而洞悉用户的潜在的、真实的需求，形成预判。这是传统企业花费重金都难以企及的梦想。所有传统的产品公司都只能沦为这种新型用户平台级公司的附庸。 国外发展情况：万马奔腾，抢占大数据高地 大数据国外发展情况 衍生于亚马逊、Google等互联网公司 前瞻来看，随着互联网对网民的理解，网民对网络的反作用，互联网将变得越来越智能。它在满足你需求的同时，也在创造新的需求。前者的代表是Google，后者的典型则是Facebook。 谷歌的盈利在于所有的软件应用都是在线的。用户在免费使用这些产品的同时，把个人的行为、喜好等信息也免费的送给了Google。因此Google的产品线越丰富，他对用户的理解就越深入，他的广告就越精准。广告的价值就越高。 这是正向的循环，谷歌好用的、免费得软件产品，换取对用户的理解；通过精准的广告，找到生财之道。颠覆了微软卖软件拷贝赚钱的模式。成为互联网的巨擘。 互联网越来越智能 Google精确掌握用户行为、获取需求 IBM\Oracle\EMC\Microsoft角力大数据 EMC EMC的大数据解决方案专注于使组织更有效地使用他们从不同来源产生的数据，包括网络上，网页上，消费者，监控系统和传感器。 EMC的数据计算产品事业部正在开发分析工具以解决大数据现象。 EMC的大数据解决方案包括40多个产品。 2010年7月收购数据库软件供应商Greenplum，花费3亿美元 2009年七月收购数据复制解决方案提供商Data Domain，花费24亿美元 不一定和大数据完全相关，EMC从2009年起收购了Archer Technologies, SourceLabs, FastScale Technology, Configuresoft, and Varonis Systems。 IBM IBM的策略是提供一个全面的方法来解决前所未有的信息爆炸提出的挑战，因为信息量无论在流量、种类、速度还是活力上都是爆炸式增长 IBM一直致力于扩大对包括数据仓库中的大数据、信息流和结构化数据的分析 在过去四年中，IBM已经投入超过120亿美元进行了23项相关并购，其中包括： 2010年9月收购数据库分析供应商Netezza公司，花费17亿美元 2010年10月收购网络分析软件供应商Coremetrics 2009年10月收购数据分析和统计软件提供商SPSS, 花费12亿美元 2009年1月收购业务规则管理软件供应商ILOG, 花费3亿4千万美元 2007年花费20亿美元收购商务智能软件供应商Cognos 微软 微软提供了高性能计算能力，并在2005年靠Windows Compute Cluster服务器进入相关市场 最近，微软的HPC部门开发了该公司的Dryad?并行处理技术社区技术预览(CTP),第一步是向Windows HPC Server的用户提供处理大数据工具 甲骨文 甲骨文大数据提供的数据库和数据库软件主要用于配合Sun的硬件，特别是它的最高端服务 2009年7月收购专注于数据复制和实时数据集成解决方案的私人企业GoldenGate Software 国外已经开始大规模投资应用 美国国务院采用大数据技术开发新的美国护照系统。 IBM宣布投资1亿美元用于大数据研究； 美国IT公司开始意识到大数据技术能够为公司创造价值； 大数据公司引入汽车行业高管人员扩展营销业务； 大数据在国内的机遇 来自《大数据时代》P008； *：可参考2008年9月4日《自然》推出的名为“大数据”的专刊。 第一V是Variety，海量数据有不同格式，第一种是结构化，我们常见的数据，还有半结据化网页数据，还有非结构化视频音频数据。而且这些数据化他们处理方式是比较大的。很多不同形式（文本、图像、视频、机器数据），无模式或者模式不明显，不连贯的语法或句义 第二点就是Volume，量比较大，我们有一些用户化每秒就要进入很多数据，很多客户内部都有几批数据，还有下面淘宝都是几PB数据，所以PB化将是比较常态的情况。非结构化数据的超大规模和增长，占总数据量的80~90%，比结构化数据增长快10倍到50倍，是传统数据仓库的10倍到50倍 第三个是Velocity，因为数据化会存在时效性，需要快速处理，并得到结果出来。比如说，一些电商数据，今天的信息不处理没有结果化，将会影响到今天捕获很多商业决策。 立竿见影而非事后见效 第四个是Value：大量的不相关信息，不经过处理则价值较低，属于价值密度底的数据 海量数据分析非常复杂，使得过去靠单纯数据库B