hadoop单机及集群配置.docxVIP

实验报告 （2014 / 2015学年第二学期） 课程名称 云计算 实验名称 Hadoop单机及集群配置 实验时间 2015 年 5 月 13 日 指导单位 指导教师 学生姓名 班级学号 学院（系） 专 业 实验报告 实验名称 Hadoop单机及集群配置 指导教师 实验类型 上机 实验学时 2 实验时间 2015.5.13 一、实验目的和要求 实验要求：学会Hadoop单机版及集群的安装配置 实验目的：1）了解Hadoop的安装及运行环境； 2） 掌握Hadoop的工作原理； 3） 在此基础上为Hadoop数据分析奠定基础 二、实验环境 虚拟机 Ubuntu14.04、hadoop-1.2.1 三、实验原理及内容 1、 安装 Ubuntu14.04 使用 VMware Workstation 安装虚拟机 Ubuntu14.04 2、 hadoop用户组 （1）创建 hadoop 用户组：sudo addgroup hadoop ^ubuntu:-$ sudo addgroup hadoop Adding group hadcap1 （GID M轴 1} ?… Done. （2）创建 hadoop 用户：sudo adduser -ingroup hadoop hadoop rKubuntu :*-■$ sudo ^dduser -Ingroup hadoop hadoopAdding user hatfoop r Kubuntu :*-■$ sudo ^dduser -Ingroup hadoop hadoop Adding user hatfoop1 .… Adding new user hadoop C1001） with group hadoop, Creating home directory /home/hadaop■ Copying files from /etc/skel* Enter new UNIX password: Retype new UNIX passwo「d; pa^^wd； password updated successfully Uh^ngtri# the user infcrntlQn fqr hadoop Ent略r the new v击luu. pre^S ENTER for the default Full FtgE work Phri []; Home Phan []i other [ ] i （3） 为hadoop用户添加权限： sudo gedit /etc/sudoers，在打开的文件中添加一句 hadoop ALL= （ALL： ALL） ALL, 其中hadoop和ALL之间的空格使用TAB键。 AILL = （ALL： AILL = （ALL：ALL） ALL hadoop ALL=（ALL：ALL） ALL （4） 使用 （4） 使用hadoop用户登录系统 重新打开Ubuntu，发现登陆界面多了一个hadoop用户，用hadoop用户登录系统。 3、SSH配置 （1） Ubuntu14.04己默认安装ssh的客户端，只需要安装服务器端即可，但在实际操作 时，发现由于是刚安装的Ubuntu系统，该系统没有更新，还没有安装ssh，因此先使用 系统更新命令sudo apt-get update更新系统。 hadoopgubuntu:~$ sudo apt-get update （2）安装 ssh： sudo apt-get install openssh-server。 hadoop@ubuntuj~$ sudo apt-get install ipenssh-server （3） 启动 ssh： sudo /etc/init.d/ssh start 查看服务是否正确启动：ps -e | grep ssh。 hadoop@ubuntu^~5 sudo /etc/tnit.d/ssh start hadoopgubuntur~$ p -e | grep ssh 1168 ? 00:OrO0 sshd （4）设置免密码登录，生成私钥和公钥：ssh-keygen -t rsa -P 〃〃 hadoop@ubuntu:~ ssh-keygen -t rsa -P Generating publtc/private rsa key pair * Enter file in which to save the key （/home/hadoop/*ssh/id_rsa）; （5） 将公钥追加到authorized_keys （authorized_keys用于保存所有允许以当前用户身份 登录到 ssh 客户端用户的公钥内容）中：cat ~/.ssh/id_rsa.pub ~/