基于hadoop的大数据处理关键技术综述.pptxVIP

会计学 1 基于Hadoop的大数据处理关键技术综述 Content 定义、特点 大数据对系统的需求、大数据和云计算的关系 大数据市场分析 大数据处理的技术关键 1 2 Hadoop原理、优点 Hadoop体系架构 Hadoop核心设计：MapReduce、HDFS 第1页/共22页 1 定义 为了更为经济的从高频率获取的、大容量的、不同结构和类型的数据中获取价值，而设计的新一代架构和技术 特点 第2页/共22页 大数据对系统的需求 大数据和云计算的关系 High performance –高并发读写的需求 高并发、实时动态获取和更新数据 Huge Storage –海量数据的高效率存储和访问的需求 类似SNS网站，海量用户信息的高效率实时存储和查询 High Scalability High Availability –高可扩展性和高可用性的需求 需要拥有快速横向扩展能力、提供7*24小时不间断服务 云计算改变了IT,而大数据则改变了业务 云计算是大数据的IT基础，大数据须有云计算作为基础架构，才能高效运行 通过大数据的业务需求，为云计算的落地找到了实际应用 第3页/共22页 大数据市场分析 2011年是中国大数据市场元年，一些大数据产品已经推出，部分行业也有大数据应用案例的产生。2012年-2016年，将迎来大数据市场的飞速发展。 2012年中国大数据市场