大数据发展概况及行业解决方案.pptxVIP

目录1 理解大数据2 大数据业界解决方案及典型应用概览数字宇宙在60秒内，YouTube会上传48小时的视频；Google会收到2000000次搜索请求；Facebook的用户会分享684478条信息；目前世界上90%以上的数据是最近3年才产生的；2009年0.8Z，每年将增长50%，每两年便将翻一番，而预测全球的数据使用量到2020年会增长44倍，达到35.2ZB (1ZB = 10亿TB)；231较少：传统IT，企业业务系统，门户网站；15%；较多：社交网络兴起，大量的UGC(用户自生成内容)内容、音频、文本信息、视频、图片，非结构化数据出现了；最多：物联网的数据量更大，加上移动互联网能更准确、更快地收集用户信息，比如环境、位置、生活信息等数据；并处于急剧加速的趋势；实体角度Wiki百科：大数据（Big Data）是指那些超过传统技术处理能力的数据。它的数据规模和转输速度要求很高，或者其结构不适合原本技术存取、处理。广泛意义IDC：大数据，通常是指解决问题的一种方法，即通过收集、整理生活中方方面面的数据，并对其进行分析挖掘，进而从中获得有价值信息，最终衍化出一种新的商业模式。高速化精确化海量化多样化1086420全球数据存储量（ZB）8201120122015数量也许是与大数据最相关的特征；从TB级别，跃升到PB、ZB级别；前所未有的规模和加速趋势；每天上传168TB视频每天25TB日志数据每天9500万条 数据形式的多样结构化数据，数据间有很强的因果关系；半结构化数据，数据间因果关系较弱；非结构化数据， 数据间无因果关系；数据来源的多样性不同的应用系统各种设备互联网其它大数据与海量数据的一个重要区别，在于不仅数据尺寸大，而且对数据处理的响应速度有着更高的要求；处理速度快，1秒定律；传统的以周，天，小时为单位的运算处理周期，下降到以分钟，秒为单位；大数据高价值的重要体现-处理速度；信用卡欺诈检测：通过分析每个客户的历史用卡行为， 使用欺诈检测模型实时来检测每一笔交易是否异常。案例数据不确定性。例如人的感情，天气形势，经济因素，环境信息等。价值密度低。以视频为例，连续不间断监控过程中，可能有用的数据仅仅有一两秒。精确性是大数据最重要的特性，体现价值；客观的数据体毫无意义；精确是对大数据方法的要求和挑战，大数据的核心，第5V：Value；eBay精准在线营销美国海啸预警我们在信息的海洋里淹死了，却在知识的海洋里渴死了。日本大地震发生后仅9分钟，美国国家海洋和大气管理局（NOAA）就发布了详细的海啸预警，制作的海啸影响模型出现在YouTube等网站；NOAA的快速反应基于其全球范围内庞大的海洋传感器网络，获取全球范围的海洋信息，并对获得的实时数据进行计算机模拟。NOAA的数据中心存储着超过20Pb的数据，是美国政府最大的数据库之一。Ebay 有 1.8 亿个活跃用户，有 3.5 亿左右的商品被销售，每天会产生 2.5 亿次搜索，拥有的原始数据是 10 PB；用户行为模式+用户基本信息，更精准的定位客户，感知客户购物需求，促成在线交易率；新浪微博+淘宝；QQ；数据进行专业化处理，并与已知的现实相融合，洞察运营，促进和创新；数字石油；数据回报率=数据价值/数据成本；全球大数据市场规模从今年的148.7亿美元增长到2018年的亿美元。数据存储；处理能力；实时响应；业务价值；传统的IT架构和技术已经不能适应大数据的处理需求；早在1980年，著名未来学家阿尔文·托夫勒便在《第三次浪潮》一书中，将大数据赞颂为“第三次浪潮”；全球知名咨询公司麦肯锡最早提出“大数据”时代到来； 从2009年开始，“大数据”才成为互联网信息技术行业的流行词汇；2012年出版的《大数据时代》，对大数据进行系统、明确的阐述；2012年3月，美国政府投资2亿美元启动“大数据研究和发展计划”，美国政府认为大数据是“未来的新石油”，将“大数据研究”上升为国家意志。我国尚未提出国家层面的大数据战略，在十二五的规划中把大数据作为物联网的相关关键技术提及；EMC、惠普、IBM、微软在内的全球IT巨头纷纷布局大数据；今年最大的收购案都与大数据相关：Oracle对Sun、惠普对Autonomy;状态：大数据相当于2010年左右的云计算：概念火热，摸索实践，落地较少；12011年-2016年中国大数据市场规模计世资讯认为，2011年是中国大数据市场元年，一些大数据产品已经推出，部分行业也有大数据应用案例的产生。2012年-2016年，将迎来大数据市场的飞速发展。计世资讯预测，2012年中国大数据市场规模将达到亿元，2013年大数据市场将迎来增速为138.3%的飞跃，到2016年，整个市场规模逼近百亿。十二五规划落地，4G；22014年各行业大数据市场规模计世资讯预测，2014年政府、