大数据时代下的统计.pptxVIP

大数据时代的统计//数学与金融学院大数据时代的统么是大数据大数据时代的变革大数据的实践大数据与政府统计大数据大数据大数据时代的背景“大数据”的诞生： 半个世纪以来，随着计算机技术全面融入社会生活，信息爆炸已经积累到了一个开始引发变革的程度。它不仅使世界充斥着比以往更多的信息，而且其增长速度也在加快。信息爆炸的学科如天文学和基因学，创造出了“大数据”这个概念*。如今，这个概念几乎应用到了所有人类智力与发展的领域中。 21世纪是数据信息大发展的时代，移动互联、社交网络、电子商务等极大拓展了互联网的边界和应用范围，各种数据正在迅速膨胀并变大。。什么是大数据？无法在一定时间内用常规软件工具对其内容进行抓取、管理和处理的大量而复杂的数据集合 —— 维基百科数量大、获取速度快或形态多样的数据，难以用传统关系型数据分析方法进行有效分析，或者需要大规模的水平扩展才能高效处理 —— 美国NIST体量大、快速和多样化的信息资产，需用高效率和创新型的信息技术加以处理，以提高发现洞察、做出决策和优化流程的能力 —— Gartner公司大数据的“4V”特性大数据是指无法在一定时间内用传统数据库软件工具对其内容进行抓取、管理和处理的数据集合2. Variety1. Volume数据量巨大全球在2010 年正式进入ZB 时代，IDC预计到2020 年，全球将总共拥有35ZB 的数据量结构化数据、半结构化数据和非结构化数据如今的数据类型早已不是单一的文本形式，订单、日志、音频，对处理能力提出了更高的要求4. Velocity3. value沙里淘金，价值密度低以视频为例，一部一小时的视频，在连续不间断监控过程中，可能有用的数据仅仅只有一两秒。如何通过强大的机器算法更迅速地完成数据的价值“提纯”是目前大数据汹涌背景下亟待解决的难题实时获取需要的信息大数据区分于传统数据最显著的特征。如今已是ZB时代，在如此海量的数据面前，处理数据的效率就是企业的生命大数据的4V特征VolumeVarietyVelocityValue“大量化(Volume)、多样化(Variety)、快速化(Velocity)、价值密度低（Value）”就是“大数据”的显著特征，或者说，只有具备这些特点的数据，才是大数据。一天之间，互联网上要发生多少事每天有2940亿封电子邮件发出，如果这些是纸质信件，在美国需要花费两年时间处理；每天有200万篇博客在网上发布，这些文章相当于《时代》杂志刊发770年的总量；每天有2.5亿张照片上传至社交网站Facebook，如果都打印出来，摞在一起能有80个埃菲尔铁塔那么高；每天有86.4万小时视频被上传至视频网站Youtube，相当于不间断播放视频98年；每天有1.87亿个小时的音乐会在流媒体音乐网站Pandora上播放，如果一台电脑从公元元年就开始播放这些音乐会，到现在还没完没了地接着放；谷歌翻译每天处理的文字数量,每天翻译次数达十亿次，相当于一百万册图书，超过了全世界的专业翻译人员一年能够翻译的文字规模；百度每天的关键词搜索量50亿，谷歌33.3亿；淘宝天猫双11那一天营业额达191亿人民币。中国小商品城全年成交额才580.03亿元人民币；累积起来，互联网一天之内产生的信息总量，可以装满1.68亿张DVD光盘。未来：物联网每天产生的数据将会是海量的。 “大数据”在互联网行业指的是这样一种现象：互联网公司在日常运营中生成、累积的用户网络行为数据。这些数据的规模是如此庞大，以至于不能用G或T来衡量。什么是大数据时代 一分钟内，微博/view/2399664.htm推特上新发的数据量超过10万；社交网络“脸谱”的浏览量超过600万……这些庞大数字，意味着什么？它意味着，一种全新的致富手段也许就摆在面前，它的价值堪比石油和黄金。事实上，当你仍然在把微博等社交平台当作抒情或者发议论的工具时，华尔街的敛财高手们却正在挖掘这些互联网的“数据财富”，先人一步用其预判市场走势，而且取得了不俗的收益。？大数据引发全球高度重视IBM 、沃尔玛等传统企业大规模并购大数据公司，进军大数据领域2012年初世界经济论坛讨论大数据一题引起政商界高度关注2011年麦肯锡总结大数据现象并发布报告，点燃大数据热潮IT和其他行业咨询公司经济界2000年以来，搜索、广告和电商利用大数据获得丰厚回报2012年，美国、英国、日本等政府积极开放数据，并资助大数据研发共识互联网政府大数据=战略资源多国政府的战略国家/地区时间内容美国2012年3月启动由联邦政府六个部门组织的大数据研究计划，投资两亿美元，力图巩固领先地位欧盟2012年9月联合欧洲整体力量，制定大数据战略，作为欧盟Horizon 2020战略一部分，加速追赶英国2013年1月英国把大数据作为八大关键技术领域之一，计划两