Hadoop2.7.3安装配置.docx

当前版本 VersionV1.2版本日期 Date2016.09.22页数 Total Pages17——制定与修订记录—— Hadoop 2.7.3安装配置文档 Hadoop 2.7.3安装配置 1.1安装准备 安装Java环境、下载Hadoop 2.7.3压缩包 1.2安装Hadoop 将Hadoop 2.7.3压缩包解压至”/usr/soft/”目录 注意：（1）soft目录为自定义目录，目的用于存放安装的软件，如果没有soft目录可以自行创建或者将Hadoop 2.7.3应用程序文件放置其他自定义目录（usr是Unix System Resource缩写，主要用于存放应用程序。为此这里创建了soft目录，存放应用程序；（2）赋予当前用户对soft读写和执行权限 1.3配置hadoop环境变量 配置HADOOP_INSTALL和PATH环境变量（在系统环境变量/etc/environment中配置） （1）HADOOP_INSTALL=/usr/soft/hadoop-2.7.3 （2）PATH变量追加”:/usr/soft/hadoop-2.7.3/bin: /usr/soft/hadoop-2.7.3/sbin” 注意：（1）这里的“/usr/soft/hadoop-2.7.3”路径是指hadoop安装路径；（2）配置完后，使用source命令使environment文件立即生效，命令如下： $ source /etc/environment 1.4验证Hadoop是否安装成功 使用“hadoop version”命令，如下： [hadoop@localhost soft]$ hadoop version 注意：如果提示Java环境出错，有可能是以下原因： 没有安装Java环境 Java版本过低 刚刚安装好的Java，还没重启计算机 2、Hadoop独立模式配置 独立模式：不需要更改配置文件，Hadoop安装包默认独立模式。没有运行的守护程序，所有程序运行在一个JVM中。适合开发期间运行MapReduce程序，易于测试和调试。 Hadoop伪分布模式配置 伪分布模式：守护程序运行在本地主机，模拟一个小规模集群。 3.1配置Hadoop配置文件 Hadoop配置文件位于Hadoop安装目录的“/etc/hadoop”目录下，如下图所示： 定位至hadoop安装目录下etc目录，复制一份hadoop配置文件hadoop_pseudo $ cd /usr/soft/hadoop-2.7.3/etc/ $ cp -R hadoop hadoop_pseudo 3.1.1需配置的文件 修改hadoop_pseudo目录下配置文件，分别需要配置core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml；其中core-site.xml、hdfs-site.xml、yarn-site.xml可以直接修改，mapred-site.xml可以通过复制mapred-site.xml.template文件创建。 3.1.2配置内容 （1）、core-site.xml ?xml version=1.0? !-- core-site.xml -- configuration property namefs.defaultFS/name valuehdfs://localhost//value /property /configuration （2）、hdfs-site.xml ?xml version=1.0? !-- hdfs-site.xml -- configuration property namedfs.replication/name value1/value /property /configuration （3）、mapred-site.xml ?xml version=1.0? !-- mapred-site.xml -- configuration property name/name valueyarn/value /property /configuration （4）、yarn-site.xml ?xml version=1.0? !-- yarn-site.xml -- configuration property nameyarn.resourcemanager.hostname/name valuelocalhost/value /property property nameyarn.nodemanager.aux-services/name valuemapreduce_