基于MapReduce性能优化的分析.doc

目录 上海师范大学硕士学位论文 目录 摘要II AbstractIII 目录IV 第 1章 绪论1 1.1分析背景1 1.2国内外分析现状2 1.3本文主要创新点4 1.4本文主要内容安排4 第 2章 Hadoop核心技术 6 2.1 Hadoop系统的主要特点6 2.2 Hadoop核心技术介绍7 2.2.1 HDFS工作原理 7 2.2.2 MapReduce框架的工作原理及特点 8 第 3章 MapReduce性能优化策略的设计 12 3.1 设计的考量 12 3.2 MapReduce性能优化策略的设计15 3.3集群负载的指标19 3.3.1单个系统参数的负载指标 19 3.3.2预测负载指标 20 3.4性能优化算法22 第 4章 仿真实验与结果分析26 4.1实验环境26 4.2系统仿真26 4.2.1优化效果对比 26 4.2.2调整过量的优化 29 第 5章 总结和展望31 5.1 全文的总结 31 5.2 分析展望 32 参考文献33 攻读硕士期间的分析成果35 致谢36 IV - 上海师范大学硕士学位论文 第 1 章 绪论 第1章 绪论 分析背景 随着搜索引擎的广泛应用，以及电子商务的迅速崛起，云计算这个词已经变 得越发热门了。自 Google 分别在 2003、2004、2006 年在 SOAP 和 OSDI 上分别