hadoop 2.6.0详细安装过程和实例(有截图).pdfVIP

Hadoop 环境搭建 时间：2015-07-26 作者：周乐相 环境搭建之前准备工作 我的笔记本配置： 硬盘：500G (实际上用不完) CPU： Intel(R) Core(TM) i5-2450M CPU @ 2.50GHz 内存： 10G 操作系统：WIN7 (64 位) 软件准备 1). 虚拟机软件： vmwareworkstation64.exe ( VMware work station 64 bit V 11.0) 2). Linux 版本： Red Hat Enterprise Linux Server release 6.5 (Santiago) （rhel-server-6.5-x86_64-dvd.iso） 3). hadoop 版本： hadoop-2.6.0.tar.gz 4). JAVA 版本：java version 1.6.0_32 （jdk-6u32-linux-x64.bin ） 安装 VMware 软件 傻瓜操作下一步。。。。。。 安装 Linux 操作系统 傻瓜操作下一步。。。。。 安装完成。 1). 创建 hadoop 操作系统安装 hadoop 的用户 第一台操作系统命主机名为: master 2) 拷贝该虚拟机 master 分别为 node01 、node02 两个节点数 3) 分别对拷贝的 node01 、node02 修改 IP 和主机名称 主机名: IP master : 192.168.2.50 node01: 192.168.2.51 node02: 192.168.2.52 jdk 安装 并设置好环境变量 ## 设置 JAVA_HOME 环境变量 配置 ssh 免密码通信 三台服务器 SSH 关系 上面这个图可以表达这三台服务器之间的关系。 对 master 主节点 SSH 配置 执行: ssh-keygen –t dsa 回车一直回车下去 会在$HOME/.ssh 目录生成id_dsa 和 id_dsa.pub 两个文件 将 id_dsa.pub 文件放到 authorized_keys 文件，注意需要修改权限 chmod 600 authorized_keys 依次将 node01、node02 两台的密码追加到 authorized_keys 文件里面 对 node01 节点 SSH 配置 这样 master 与 node01 就可以正常的互通无需密码 对 node02 节点 SSH 配置 这样 master 与 node02 就可以正常的互通无需密码 Hadoop 安装配置 修改配置文件 用红线框起来的都需要修改配置 修改:core-site.xml 修改:hdfs-site.xml 修改:mapred-site.xml 修改:yarn-site.xml 修改:hadoop-env.sh 修改:mapred-env.sh 修改:yarn-env.sh 修改:masterslaves 创建空文件夹 节点数据拷贝 对节点 node01、node02 数据文件拷备 在 master 节点格式化 Hadoop 启动停止 Hadoop 启动 后台查看 前台查看 Hadoop 停止 Hadoop 应 实例：WordCount 执行前 执行之后 后台查看 前台浏览器查看