大数据时代的社保经办课程.pptVIP

大数据时代的社保经办 蔡海清 二0一五年五月二十八日 大数据时代的社保经办 一、大数据的概念、特征及类型划分 二、大数据是如何产生的？ 三、大数据推动时代变革 四、展望大数据时代的社保经办 大数据时代的社保经办 一、大数据的概念、特征及类型划分 莫衷一是的定义： 麦肯锡报告：“大数据是指大小超出了传统数据库软件工具的抓取、存储、管理和分析能力的数据群” 维基百科（Wikipedia）“大数据是难以用现有的数据库管理工具处理的兼具海量特征和复杂性特征的数据集成” 涂子沛“大小已经超出传统意义上的尺度，一般的软件工具难以捕捉、存储、管理和分析的数据，认为一般应该是“太字节”的数量级” 阿里创始人马云则说，大数据就是一种服务 陈潭认为，不用随机分析法（抽样调查）而采用巨量数据的方法就是当前业界所说的“大数据” 大数据时代的社保经办 一、大数据的概念、特征及类型划分 基本的共识：“大数据”展现出“3v”特征，即：数据体量大(Volume)，类型多样化（Variety），处理速度快（Velocity） 数据体量大好理解，就是数据量大。据统计，2013年，世界上存储的数据量达到约1.2泽字节。如果我们做一个比较，就可以大致理解1.2泽字节是个什么概念。一部完整的数字电影可以压缩成1GB的文件，10亿部这样的电影相当于一个艾字节，而1024艾字节才相当于一个泽字节。由此可见，这是一个多么巨大的数据量。为了更形象说明这个概念，我们可以再进行一个类比，如果将这些数据全部印制成书，那么，这些书足以将整个中国覆盖52次之多；如果将之存储在只读光盘上，这些光盘可堆成五垛，且每垛都可伸到384401公里之遥的月球上去。 大数据时代的社保经办 一、大数据的概念、特征及类型划分 第二个特征是类型多样化。直到2000年，数字存储信息仍只占全球数据量的1/4，另外3/4的信息都存储在报纸、胶片、唱片和盒式磁带这类媒介上。7年过去，情况遽然改变，2007年，所有数据中只有7%是存储在报纸、书籍、图片等媒介上的模拟数据，其余全部是各种各样的数字数据。而截至目前，这一比例更是高达98%。 第三个特征是处理速度快。1965年，英特尔（intel）的创始人之一戈登·摩尔(Gordon Moore)在系统考察计算机硬件的发展规律后，得出了一个著名的摩尔定律，即：同一个面积集成电路上可容纳的晶体管数量，一到两年将增加一倍。也就是说，其性能将提升一倍，换句话说，计算机硬件的处理速度和存储能力，一到两年将提升一倍。这一定律经受住了近半个世纪的检验，近50年来，计算机硬件技术的发展速度，甚至比摩尔所设想的还要快。特别是自上世纪90年代起，全世界的物理存储器的处理速度和存储能力，不是一到两年而是每9个月就提升1倍。而云计算技术的广泛运用，更是极大的提高了数据处理的能力和速度。 大数据时代的社保经办 一、大数据的概念、特征及类型划分 由此可见，所谓“大数据”不仅是一个量上的概念，更具有多样性特征，如果不是约定俗成，我个人更倾向于使用“全数据”这样的说法。 “大数据”的定义，我个人比较倾向于使用我国研究大数据的专家所提出的定义，即：大数据是指采用多种数据收集方式，汇集不同数据源，通过采用现代信息技术和架构能够高速分析处理的、具有高度应用价值和决策支持功能的多种类型数据及其技术集成。 大数据时代的社保经办 一、大数据的概念、特征及类型划分 大数据的分类： 从数据类型分：①可以用二维表反映的结构化数据外；?不能以二维表反映的非结构化数据，如音频、视频、图片等；?两者混杂的半结构化数据。 从数据来源分：①行政记录数据；?商业记录数据；?互联网及搜索引擎数据。 行政记录数据包括个人信息记录数据、单位信息记录数据和自然和资源记录数据等；商业记录数据包括电子商务交易数据、企业生产经营数据和信息咨询报告数据等；互联网数据则包括搜索引擎数据、新闻媒体数据和社交平台数据等。 大数据时代的社保经办 二、大数据是如何产生的？ 大数据的产生是伴随着计算机技术的迅猛发展之后数据化运动的必然结果。 但要真正理解大数据就必需理解数据和数据化的含义。 大数据时代的社保经办 二、大数据是如何产生的？ “数据”（date）一词在拉丁文中是“已知”的意思，也可以理解为“事实”。因此，数据一词不仅仅是指科学实验、检验、统计等所获得的和用于科学研究、技术设计、查证、决策等的数值；也指存储在某种介质上能够识别的物理符号，它代表着对某种事物的描述。 从最宽泛的意义来讲，数据是被记录下来的信息，但信息却未必是数据，只有已经被记录、且可分析和重组的信息才