《大数据离线分析技术》课件——安装Spark.pptxVIP

  • 1
  • 0
  • 约1.2千字
  • 约 18页
  • 2026-07-30 发布于福建
  • 举报

《大数据离线分析技术》课件——安装Spark.pptx

;安装Spark的步骤;安装Spark的步骤; 1、官网下载Spark,/downloads.html,打开次链接,进入到下图,点击红框下载Spark-2.2.0-bin-hadoop2.7.tgz,如下图所示:

; 2、Spark安装,分为三步:

一、准备,包括上传到主节点,解压缩并迁移到/opt/app/目录;

二、Spark配置集群,配置/etc/profile、conf/slaves以及confg/spark-env.sh,共3个文件,配置完成需要向集群其他机器节点分发spark程序。

三、启动Spark。;

把spark-2.2.0-bin-hadoop2.7.tgz通过Xftp工具上传到主节点的/opt/uploads目录下。

;在主节点上解压缩。

有时解压出来的文件夹,使用命令ll查看用户和用户组有可能不是hadoop时,即上图绿框显示,则需要使用如下命令更换为hadoop用户和用户组。;sudochownhadoop:hadoopspark-2.2.0-bin-hadoop2.7;把spark-2.2.0-bin-hadoop2.7移到/opt/app/目录下。

#mvspark-2.2.0-bin-hadoop2.7/opt/app/

#cd/opt/appll

;配置/etc/profile??以hadoo

文档评论(0)

1亿VIP精品文档

相关文档