《大数据分析及云数据库关系管理（映射约简）CompetitionbetweenRDBMSandMapReduce_1.0》.pdf

云数据分析 云数据分析 关系数据库和MapReduce技术 关系数据库和MapReduce技术 Big Data Analysis—Competition between RDBMS and MapReduce Big Data Analysis—Competition between RDBMS and MapReduce The Next Revolution in Information Technology Ji Changqing XuYujie Gaoyang 2011-10 海云在线：/cloudsite 云微博： 筋斗云盘：/clouddiskv 提纲： 大数据时代的来临– 云计算的发展现状与问题 MapReduce-非关系数据管理技术 RDBMS MapReduce 竞争渗透 把分析推向数据数据分析新生态系统的浮现 学术研究热点与文献 空间数据库与云计算的结合与文献 云计算小组与个人目前的研究 ①刘鹏.云计算（第二版）Hadoop权威指南 ② 云计算环境下海量数据的查询优化与智能处理 ③ 覃雄派王珊等. 大数据分析——关系数据库和MapReduce技术的竞争、交融与共生 From:CSDN 云计算技术关键词热度排行 企业级应用中的海量数据需求： financial energy traffic Industry and Agriculture science medical society 大数据的来临 科学研究方面,大型强子对撞机每年积累的新数 据量为15PB左右 沃尔玛公司(Wal-Mart) 6000多个商店,向全球客 户销售超过2.67亿件商品数据规模达到4PB GeneBank : 416GB of data Facebook : 400 million active users 其它大数据的来源 物联网中的传感器数据(sensor data) 网站点击流数据(click stream data) 移动设备数据(mobile device data) 射频ID数据(RFID data) New York Times •Amazonews/24hour •Only 240$ •Persional server 5000$/month Hadoop users, /hadoop. 谷歌-领军 200+ processors 200+ terabyte database 1010 total clock cycles 0.1 second response time 5¢ average advertising revenue From: /~bryant/presentations/DISC-FCRC07.ppt 核心：Large Scale Data Processing Want to process lots of data ( 1 TB) Want to parallelize across hundreds/thousa