rhadoop安装跟使用_光环大数据培训机构.pdfVIP

光环大数据--大数据培训人工智能培训 RHadoop 安装与使用_光环大数据培训机构 1. 环境准备2. RHadoop 安装3. RHadoop 程序用例 每一章节，都会分为”文字说明部分”和”代码部分”，保持文字说明与代 码的连贯性。 注：Hadoop 环境搭建的详细记录，请查看 同系列上一篇文章 “RHadoop 实 践系列文章之Hadoop 环境搭建”。 由于两篇文章并非同一时间所写，hadoop 版本及操作系统，分步式环境都 略有不同。 两篇文章相互独立，请大家在理解的基础上动手实验，不要完成依赖两篇文 章中的运行命令。 环境准备 文字说明部分： 首先环境准备，这里我选择了Linux Ubuntu 操作系统 12.04 的64 位版本， 大家可以根据自己的使用习惯选择顺手的Linux。 但JDK 一定要用Oracle SUN 官方的版本，请从官网下载，操作系统的自带 的OpenJDK 会有各种不兼容。JDK 请选择1.6.x 的版本，JDK1.7 版本也会有各种 的不兼容情况。 /technetwork/java/javase/downloads/index.htm l Hadoop 的环境安装，请参考RHadoop 实践系统”Hadoop 环境搭建”的一文。 光环大数据 光环大数据--大数据培训人工智能培训 R 语言请安装2.15 以后的版本，2.14 是不能够支持RHadoop 的。 如果你也使用 Linux Ubuntu 操作系统 12.04，请先更新软件包源，否则只 能下载到2.14 版本的R。 代码部分： 1. 操作系统Ubuntu 12.04 x64 ~ uname -aLinux domU-00-16-3e-00-00-85 3.2.0-23-generic #36-Ubuntu SMP Tue Apr 10 20:39:51 UTC 2012 x86_64 x86_64 x86_64 GNU/Linux 2 JAVA 环境 ~ java -versionjava version 1.6.0_29Java(TM) SE Runtime Environment (build 1.6.0_29-b11)Java HotSpot(TM) 64-Bit Server VM (build 20.4-b02, mixed mode) 3 HADOOP 环境(这里只需要hadoop) hadoop-1.0.3 hbase-0.94.2 hive-0.9.0 pig-0.10.0 sqoop-1.4.2 thrift-0.8.0 zookeeper-3.4.4 4 R 的环境 R version 2.15.3 (2013-03-01) -- Security BlanketCopyright (C) 2013 The R Foundation for Statistical ComputingISBN 3-900051-07-0Platform: x86_64-pc-linux-gnu (64-bit) 4.1 如果是Ubuntu 12.04，请更新源再下载R2.15.3 版本 光环大数据 光环大数据--大数据培训人工智能培训 sh -c echo deb /cran/bin/linux/ubuntu precise/ /etc/apt/sources.listapt-get updateapt-get install r-base RHadoop 安装 文字说明部分： RHadoop 是 RevolutionAnalytics 的工程的项目，开源实现代码在GitHub 社区可以找到。RHadoop 包含三个R 包 (rmr，rhdfs，rhbase)，分别是对应Hadoop