架构大数据_挑战_现状与展望_王珊架构大数据_挑战_现状与展望_王珊.pdfVIP

第 34 卷 　第 10 期 计 　　算 　　机 　　学 　　报 V ol. 34 N o. 10 2011 年 10 月 CH IN ESE JOU RNA L OF COM PUTE RS O ct. 2011 　 架构大数据 :挑战 、现状与展望 1), 2) 1), 2) 1), 2) 1) , 2) 王 　珊 　王会举 　覃雄派 　周 　烜 1)(数据工程与知识工程教育部重点实验室(中国人民大学)　北京 　100872) 2)(中国人民大学信息学院　北京 　100872) 摘　要 　大数据分析相比于传统的数据仓库应用 , 具有数 据量大 、查询分析复杂等 特点. 为 了设计适 合大数据分 析 的数 据仓库架构 , 文中列举了大数据分析平台需要具备的 几个重要特性 , 对 当前的主流 实现平台 ——— 并 行数据库 、 M apReduce 及基于两者的混合架构进行了分析归纳 , 指出了 各自的 优势及不 足 , 同时也 对各个方 向的研 究现状 及 作者在大数据分析方面的努力进行了介绍 , 对未 来研究做了展望. 关键词 　大数据 ;大规模可扩展 ;M apReduce ;并行数据库 ;深度分析 中图法分类号 T P 311 　　　DOI 号 :10. 3724 /SP. J. 1016. 2011. 01741 Architecting Big Data :Challenges , Studies and Forecasts WANG Shan1), 2) 　WANG H ui-Ju1), 2) 　QIN Xiong-Pai1), 2) 　ZH OU Xuan1), 2) 1)(Key Laboratory o f Data Eng ineering and Knowled ge Eng ineering (Renmin University o f Ch ina)o f Ministry of Education , B eijing 100872) 2)(S chool o f I n formation , R enmin University o f Ch ina , B eijing 　100872) Abstract 　 Compared with traditio nal data w arehouse applicatio ns , big data analy tics are huge and com plex . To desig n a favo rable a rchitecture for big data analy tics , this paper lists some key fea- tures fo r big data analy tics , sum marizes current main implem entatio n platfo rms(parallel da tabas- es , M apReduce , and hybrid architectures based o n them), and points their pros and cons. Some current researches are also inv estig ated , our w ork are introduced and some challeng ing research pro