构造分布式SPARK集群汇编.pdfVIP

构造分布式 Spark 集群 环境配置 安装文件准备 JDK：jdk-8u77-linux-i586 Hadoo ：hadoop-2.3.0-cdh5.0.0.tar Hive：hive-0.12.0-cdh5.0.0 MySQL： 服务器： MySQL-server-5.5.31-2.el6.i686.rpm 客户端： MySQL-client-5.5.31-2.el6.i686.rpm Scala：scala-2.11.7 Spark：spark-1.6.0-bin-hadoop2.6 三台虚拟机分别配置主机名： 命令： vim /etc/sysconfig/network SparkMaster SparkWorker1 SparkWorker2 三台虚拟机同时设置主机名和 IP 对应： 命令： vim /etc/hosts localhost 29 SparkMaster 30 SparkWorker1 31 SparkWorker2