大数据技术研究综述.docVIP

大数据技术研究综述 刘智慧张泉灵 浙江大学智能系统与控制研究所 摘要： 大数据的产牛给海量信息处理技术带来新的挑战.为了更全面深入地了解大数据 的内涵，从大数据的概念特征、一般处理流程、关键技术三个方面进行详细阐述. 分析了大数据的产生背景，简述了大数据的基本概念、典型的4 “V”特征以及 重点应用领域;归纳总结了大数据处理的一般流程，针对其中的关键技术，如 MapReduce GFS、BigTable Hadoop以及数据可视化等，介绍了基本的处理过 程和组织结构;具体分析指出了大数据时代所面临的问题与挑战. 关键词： 大数据;数据处理技术;数据分析;云计算; 作者简介：刘智慧(1989—),女，硕士生，从事大数据处理技术方面的研 究.E-mail:zhihui891126@163. com 作者简介：张泉灵，男，副研究员.E-medl:qlzhang@iipc. zju. edu. cn 收稿日期：2013-07-25 基金：国家“十二五”科技支撑计划资助项冃(2012BAF10B04) Research overview of big data technology LIU Zhi-hui ZHANG Quan-ling Institute of Cyber-systems and Control, Zhejiang University; Abstract： The eme