国内外大数据产业发展态势及对广东的建议.pdf

国内外大数据产业发展态势 及对广东的建议 文 ／幸雯 刘建明 全球大数据产业的日趋活跃， (一)大数据 算框架MapReduce是Hadoop的分布 技术演进和应用创新 的加速发展 ， 在维基百科 中关于大数据的定 式计算模块 ，MapReduce可以分为 使各 国政府逐渐认识到大数据在推 义为：“大数据是指利用常用软件工 Map方法~nReduce方法。 动经济发展、改善公共服务 ，增进 具来获取、管理和处理数据所耗时 (--)大数据产业 人民福祉，乃至保障国家安全方面 间超过可容忍时间的数据集”，这 从国际视角来看 ，大数据产业 的重大意义。近年来 ，以美国为首 并不是一个精确的定义。 目前 ，大 的概念有狭义和广义之分。狭义的 的发达国家纷纷将大数据产业列为 数据并没有一个公认 的定义 ，但总 大数据产业指数据采集、加工与相 国家战略，抢 占大数据产业发展高 的看来 ，不 同的定义基本是从大数 关服务业 ，即对大量数据进行采集 地。近期 ，我国首次提 出大数据 国 据 的特 征 出发 。 国际数据 公 司 加工处理转化为顾客需要 的数据产 家发展战略，部分省市纷纷出台行 (IDC)从四个方面对大数据作一个 品的产业。广义的大数据产业包括 动计划，特别是贵州异军突起，推 定义：volume(容量大 )、variety 了从数据相关软硬件的制造到数据 动大数据产业 “弯道超车”。这些 (类型多 )、velocity(存储速度快 ) 服务 的总过程所涉及到 的一切业 经验和做法对广东具有重要的借鉴 ~l：]value (应用价值高 )。高德纳 务 ，可分为两个层次，一层是数据 意义。 (Gartner)提出：“大数据是需要新 的采集、加工、存储 、传播等相关 处理模式才能具有更强的决策力、 的数据服务 ；另一层是进行这些数 一 、 什么是大数据产业 洞察发现力和流程优化能力 的海 据服务 的软、硬件研发部 门和制造 量 、高增长率和多样化的信息资 业。一般情况下的大数据产业指狭 “大数据”这一术语是2008年 产。” 义的数据产业 ，但近年来 ，越来越 在科技领域 中开始出现。2011年麦 大数据需要特殊的技术，以有 多的大数据研究报告倾 向于将相关 肯锡全球研究院 (MG1)发布报告 效地处理大量的容忍经过时间内的 软硬件 的制造也纳入到大数据产业 《大数据：创新、竞争和生产力的 数据。当前业界最流行的大数据技 链 。大数据产业链主要包括4个环 下一个前沿》，指出：大数据 已经 术是以Hadoop开源框架为核心，分 节：大数据lT基础设施、大数据组织 渗透到各行各业，引起 了全世界对 布 式文件处理 系统 (HDFS)是 管理、大数据分析与发现、大数据 大数据的关注。 Hadoop的文件存储模块，分布式计 应用服务 (如图1)。 大数据IT基础设施 大数据组织与管理 大数据分析与发现 大数据应用服务 如存储设备、运算设备、 如开展分布式文件系统、 如数据挖掘与统计、基 如数据运营、大数据交 一 体机、操作系统、基 分布式计算系统、数据 于大数据的业务分析与 易、分析与预测服务、 础软件、盯支撑等 库、数据仓储、MOIAP、 预测、商业智能 (BI)、 决策支持服务、数据分 HOLAP、数据转换工具、 人工智能 (A1)、数据 享平台、数据分析平台 数据安全等 可视化等 等 图1大数据产业链 二、国内外大数据产