- 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
 - 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
 - 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
 - 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
 - 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
 - 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
 - 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
 
                        查看更多
                        
                    
                
Hadoop  环境搭建
时间: 2015-07-26
作者:周乐相
环境搭建之前准备工作
我的笔记本配置:
硬盘: 500G	(实际上用不完  )
CPU : Intel(R) Core(TM) i5-2450M CPU
2.50GHz
存:	10G
操作系统: WIN7 (64	位)
软件准备
1).
虚拟机软件:
vmwareworkstation64.exe ( VMware work station 64 bit
V
11.0)
2). Linux	版本: Red Hat Enterprise Linux Server release 6.5 (Santiago)
( rhel-server-6.5-x86_64-dvd.iso	)
3). hadoop	版本: hadoop-2.6.0.tar.gz
4). JAVA	版本: java version 1.6.0_32	( jdk-6u32-linux-x64.bin  )
安装 VMware  软件
傻瓜操作下一步。 。。。。。
安装 Linux 操作系统
傻瓜操作下一步。 。。。。
安装完成。
1).  创建 hadoop  操作系统安装	hadoop  的用户	第一台操作系统命主机名为	: master
拷贝该虚拟机  master  分别为  node01  、 node02  两个节点数
分别对拷贝的  node01  、node02  修改 IP 和主机名称
主机名 :	IP
master : 192.168.2.50
node01: 192.168.2.51
node02: 192.168.2.52
jdk 安装
并设置好环境变量
##  设置 JAVA_HOME	环境变量
配置 ssh 免密码通信
三台服务器 SSH关系
上面这个图可以表达这三台服务器之间的关系。
对 master  主节点 SSH配置
执行 : ssh-keygen	–t dsa	回车一直回车下去	会在 $HOME/.ssh	目录生成	id_dsa	和 id_dsa.pub	两个文件
将 id_dsa.pub	文件放到  authorized_keys	文件,注意需要修改权限	chmod 600 authorized_keys
依次将 node01 、 node02  两台的密码追加到	authorized_keys	文件里面
对 node01 节点 SSH配置
这样 master  与 node01  就可以正常的互通无需密码
对 node02 节点 SSH配置
这样 master  与 node02  就可以正常的互通无需密码
Hadoop 安装配置
修改配置文件
用红线框起来的都需要修改配置
修改 :core-site.xml
修改 :hdfs-site.xml
修改 :mapred-site.xml
修改 :yarn-site.xml
修改 :hadoop-env.sh
修改 :mapred-env.sh
修改 :yarn-env.sh
修改 :masterslaves
创建空文件夹
节点数据拷贝
对节点  node01 、 node02 数据文件拷备
在 master  节点格式化
Hadoop 启动  停止
Hadoop 启动
后台查看
前台查看
Hadoop 停止
Hadoop 应用
实例: WordCount
执行前
执行之后
后台查看
前台浏览器查看
                
原创力文档
                        

文档评论(0)