大数据技术的发展及其研究综述.docVIP

PAGE  PAGE 8 大数据技术的发展及其研究综述 　　[摘 要]“互联网+”时代，信息技术的广泛使用极大推动了大数据技术的应用与发展，其已经渗透到人们的日常生活中。本文从大数据技术的概念、发展展开论述，总结了大数据技术对人类发展存在的价值和意义，并分析了使用大数据技术所存在的风险及伦理问题，为大数据技术的进一步研究提供理论指导，并为其实践应用提供借鉴。 　　[关键词]大数据技术；发展；应用价值；应用风险；道德伦理 　　doi：10.3969/j.issn.1673 - 0194.2016.20.097 　　[中图分类号]TP311.13 [文献标识码]A [文章编号]1673-0194（2016）20-0-02 　　1 大数据技术概述 　　当前，学术界对于大数据概念还没有一个完整统一的定义。全球知名咨询公司麦肯锡（McKinsey）在《大数据：创新、竞争和生产力的下一个前言领域》报告中认为：大数据是一种数据集，??的数据量超越了传统数据库技术的采集、存储、管理和分析能力。权威咨询公司Gartner则认为：大数据指的是一种新的数据资产，是高数据、高容量、种类繁多的信息价值，这种数据资产需要由新的处理模式来应对，以便优化处理和正确判断。信息专家涂子沛在其著作《大数据》中认为：大数据之大绝不只是指容量之大，更在于通过对大量数据的分析而发现新知识，从而创造新的价值，获得大发展。尽管目前学界和产业界对大数据概念尚缺乏统一的定义，但对大数据的基本特征还是达成了一定共识，即大数据具有5个基本特征：数据规模大、种类多、速度快、真实性和数据价值密度稀疏。 　　大数据技术的兴起虽然是近年的事情，但追本溯源则是从20世纪发端的。1989年，Howard Dresner首次提出“商业智能（Business Intelligence）”，它是一种能够把数据转化为信息与知识从而帮助企业进行决策从而提升企业竞争力的工具，其核心就在于对大量数据的处理。随着20世纪互联网的飞速发展，数据量越来越大，复杂性越来越高，对此，传统的数据技术已经不能满足当前处理海量数据的需要，因而对海量数据的收集和处理的技术变得尤为重要，“大数据”这一概念诞生。1997年，考克斯和埃尔斯沃思在第八届美国电气和电子工程师协会（IEEE）学术年会上发表了《为外存模型可视化而应用控制程序请求页面调度》的文章，提出了大数据问题，这是在美国计算机学会的数字图书馆中第一篇使用“大数据”这一术语的文章。2008年，随着互联网产业的迅速发展，雅虎、谷歌等大型互联网或数据处理公司发现传统的数据处理技术不能解决问题时，大数据的思考理念和技术标准被首先应用到了实际。2010年2月，肯尼斯?库克尔（Kenneth Cukier）在《经济学人》上发表了长达14页的大数据专题报告《数据，无所不在的数据》，认为从经济界到科学界，从政府到平民，“大数据”概念广为人知。Twitter、Facebook、微博等社交网络兴起将人类带入了自媒体时代；苹果、三星等智能手机的普及，移动互联网时代的到来，这一时期里，大数据技术逐渐得到空前重视。2011年，麦肯锡（McKinsey）战略咨询公司的全球研究院（MGI）发布了名为《大数据；创新、竞争和生产力的下一个新领域》研究报告，认为大数据从技术领域进入商业领域的时机已经到来，大数据的运用将融入到政治、经济、社会等领域的各个方面。2014年4月，世界经济论坛以“大数据的回报与风险”主题发布了《全球信息技术报告（第13版）》，认为在未来几年中针对各种信息通信技术的政策甚至会显得更加重要，各国政府逐渐认识到大数据在推动经济发展、改善公共服务、增进人民福祉，乃至保障国家安全方面的重大意义。 　　在国内外大数据技术的发展日新月异，对大数据技术研究的需要也日益重要。虽然当前学界对大数据技术概念的定义尚未统一，不同机构、公司、企业都对大数据技术有着自身的认识和看法，但对大数据技术的基本内涵还是可以通过研究和分析而达到一个基本的共识和标准，而对大数据技术的内涵、内容、特点等基本问题做出研究和界定，又有利于大数据技术与其研究的进一步发展。 　　2 大数据技术的应用价值 　　大数据是不断流动、产生和快速发展的，现在已经成为一种社会资源，具有重大价值。数据产生、解析、存入、共享、检测、消费形成了大数据的连环网络，构成了大数据的有机生态结构系统。在每个环节都可能产生不同的需要，而各个环节的不同需要又促进理论、技术和方法的革新。大数据技术与社会应用相结合，使大数据与政策决策和商业决策相关联，通过大数据技术处理重组和快速利用各类战略资源，通过大数据技术使信息产生增值价值，以挖掘并发挥大数据技术的巨大潜力和价值。Luciano Floridi指出，大数据的价值论问题在