1. 您所在位置：
  2. 网站首页
  3. 文档分类
  4. 办公文档
  5. 简明教程

田毅-Spark开发及本地环境搭建指南.pdfVIP

  • 7
  • 0
  • 约6.46千字
  • 约 39页
  • 2017-03-25 发布于广东
  • 举报

田毅-Spark开发及本地环境搭建指南.pdf

    Spark开发及本地环境搭建指南 目录 ?? 构建本机开发环境 ?? 向社区交PR 构建本机上的Spark开发环境 使用IDEA进行Spark开发与调试 ?? 环境准备 –? 推荐使用CentOS, Redhat, Fedora等Linux操作系统 –? 推荐使用MacOS –? 如果使用PySpark (python on Spark) 需要使用JDK1.6.x –? 安装IntelliJ IDEA (后续使用IDEA13举例) –? 安装Scala 2.10.4 –? 安装Maven –? 安装git客户端 导入Spark工程 使用git命令下载源码 IDEA中选择Open Project 选择Spark ?录下?的 pom.xml 导入完成 根据需要选择Pro?le Hadoop版本 是否引入spark-hive 是否运行

    您可能关注的文档

    最近下载

    文档评论（0）

    1亿VIP精品文档

    更多 >

    相关文档

    更多 >