hadoop的运行环境配置.pptVIP

基于Hadoop平台的并行编程实践 李东秀 内容介绍 熟悉hadoop配置环境 搭建实验 平台 编写 （矩阵相乘）运算的 map， reduce函数 在hadoop实验 平台上实现 配置计算环境： 1个Master、3个Slave的Hadoop集群 Apache软件基金会下的一个开源分布式计算平台 以Hadoop的HDFS和MapReduce为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。 对于Hadoop的集群来讲，可以分成两大类角色：Master和Salve。 一个HDFS集群是由一个NameNode和若干个DataNode组成的。 MapReduce框架是由一个单独运行在主节点上的JobTracker和运行在每个集群从节点的TaskTracker共同组成的。 1.1 Hadoop简介 HDFS在MapReduce任务处理过程中提供了文件操作和存储等支持，MapReduce在HDFS的基础上实现了任务的分发、跟踪、执行等工作，并收集结果，二者相互作用，完成了Hadoop分布式集群的主要任务。 集群中包括4个节点：1个Master，3个Salve，节点IP地址分布如下： ???????localhost20???ubuntu121???ubuntu222???ubuntu323???ubuntu4 1.2环境说明 1.3hadoop的主从