多机环境下hadoop平台搭建过程说明.docxVIP

多机环境下的hadoop平台搭建过程说明一、引言多机环境下的hadoop平台搭建是通过在每台机器上部署hadoop来构成一个hadoop的集群运行环境。本文的环境搭建是针对是每台机器安装的是双系统（windows和linux）或者单linux系统，而非windows下的linux虚拟机。并且，本文hadoop部署之前下载了如下的程序：ubuntu 12.10、hadoop 0.21.0、jdk1.6.0_37 for linux。这些程序均可以从网上下载，其中jdk1.6.0_37 for linux（此处下载的是64位的）是直接从官网上下载。本文的环境搭建选择了三台机器，其中一台机器要作为master,而另外两台机器要作为slaves。二、部署过程说明参考网上相关资源，本文所采取的部署过程分为三个阶段：单机部署阶段、多机环境下的配置阶段、和启动运行阶段。单机部署阶段主要是在每台机器上安装和配置unbuntu、JDK 和hadoop程序；第二阶段主要是进一步配置每台机器，以构成hadoop集群环境；第三个阶段主要是启动hadoop。各个阶段的详细操作步骤如下。2.1、单机部署阶段单机部署阶段主要是对集群环境中的每台机器，进行ubuntu、JDK和hadoop的安装与配置。该阶段要做的工作与单机版的hadoop平台搭建类似。2.1.1、安装ubuntu10.10ubuntu的安装按照