Hadoop详细安装配置过程.docxVIP

Hadoop Hadoop学习第一步之基础环境搭建 1.下载并安装安装ssh sudo apt-get install openssh-server openssh-client 3.搭建vsftpd #sudo apt-get update #sudo apt-get install vsftpd 配置参考 的开始、关闭和重启 $sudo /etc/vsftpd start #开始 $sudo /etc/vsftpd stop #关闭 $sudo /etc/vsftpd restart #重启4.安装 sudo chown -R hadoop:hadoop /opt cp /soft/ /opt sudo vi /etc/profile alias untar=tar -zxvf sudo source /etc/profile source /etc/profile untar jdk* 环境变量配置 # vi /etc/profile 在profile文件最后加上# set java environment export JAVA_HOME=/opt/ export CLASSPATH=.:$JAVA_HOME/lib/:$JAVA_HOME/lib/ export PATH=$JAVA_HOME/bin:$PATH 配置完成后，保存退出。 不重启，更新命令#source /etc/profile 测试是否安装成功# Java –version 其他问题： 出现unable to resolve host 解决方法参考 开机时停在 Starting sendmail 不动了的解决方案 参考 安装软件时出现 E: Unable to locate package vsftpd 参考 vi/vim 使用方法讲解参考 分类: Hadoop 克隆master虚拟机至node1 、node2 分别修改master的主机名为master、node1的主机名为node1、node2的主机名为node2 (启动node1、node2系统默认分配递增ip，无需手动修改) 分别修改/etc/hosts中的ip和主机名(包含其他节点ip和主机名) 配置ssh免密码连入 hadoop@node1:~$ ssh-keygen -t dsa -P -f ~/.ssh/id_dsa Generating public/private dsa key pair. Created directory /home/hadoop/.ssh. Your identification has been saved in /home/hadoop/.ssh/id_dsa. Your public key has been saved in /home/hadoop/.ssh/. The key fingerprint is: SHA256:B8vBju/uc3kl/v9lrMqtltttttCcXgRkQPbVoU hadoop@node1 The keys randomart image is: +---[DSA 1024] + | .... | | o+.E . | | . oo + | | .. + + | |o +. o ooo +| |=o. . o. ooo. o.| |*o +=o .+++.+| +----[SHA256] + hadoop@node1:~$ cd .ssh hadoop@node1:~/.ssh$ ll 总用量 16 drwx 2 hadoop hadoop 4096 Jul 24 20:31 ./ drwxr-xr-x 18 hadoop hadoop 4096 Jul 24 20:31 ../ -rw------- 1 hadoop hadoop 668 Jul 24 20:31 id_dsa -rw-r--r-- 1 hadoop hadoop 602 Jul 24 20:31 hadoop@node1:~/.ssh$ cat authorized_keys hadoop@node1:~/.ssh$ ll 总用量 20 drwx 2 hadoop hadoop 4096 Jul 24 20:32 ./ drwxr-xr-x 18 hadoop hadoop 4096 Jul 24 20:31 ../ -rw-rw-r-- 1 hadoop hadoop 602 Jul 24 20:32 authorized_keys -rw------- 1 hadoop hadoop 668 Jul 24 20:31 id_dsa -rw-r--r-- 1 hadoop hadoop 602 Jul 24 20:31 单机