- 1
- 0
- 约1.2千字
- 约 18页
- 2026-07-30 发布于福建
- 举报
;安装Spark的步骤;安装Spark的步骤; 1、官网下载Spark,/downloads.html,打开次链接,进入到下图,点击红框下载Spark-2.2.0-bin-hadoop2.7.tgz,如下图所示:
; 2、Spark安装,分为三步:
一、准备,包括上传到主节点,解压缩并迁移到/opt/app/目录;
二、Spark配置集群,配置/etc/profile、conf/slaves以及confg/spark-env.sh,共3个文件,配置完成需要向集群其他机器节点分发spark程序。
三、启动Spark。;
把spark-2.2.0-bin-hadoop2.7.tgz通过Xftp工具上传到主节点的/opt/uploads目录下。
;在主节点上解压缩。
有时解压出来的文件夹,使用命令ll查看用户和用户组有可能不是hadoop时,即上图绿框显示,则需要使用如下命令更换为hadoop用户和用户组。;sudochownhadoop:hadoopspark-2.2.0-bin-hadoop2.7;把spark-2.2.0-bin-hadoop2.7移到/opt/app/目录下。
#mvspark-2.2.0-bin-hadoop2.7/opt/app/
#cd/opt/appll
;配置/etc/profile??以hadoo
原创力文档

文档评论(0)