Hadoop的介绍+环境搭建.pptVIP

  • 2
  • 0
  • 约6.25千字
  • 约 45页
  • 2019-11-10 发布于安徽
  • 举报
MapReduce 举例:WordCount的Map 过程 WordCount的Reduce 过程 举例:事例MapReduce过程 Hadoop优势: 可扩展。不论是存储的可扩展还是计算的可扩展都是Hadoop的设计根本。 经济。它在通常可用的计算机集簇间分配数据和处理,这些集簇可以被计入数以千计的节点当中 高效。通过分配数据,Hadoop能够在存放数据的节点之间平行的处理它们,因此其处理速度非常快。 可信。Hadoop能够自动保存数据的多份副本,并且能够自动地将失败的任务重新分配 谢谢! Hadoop环境搭建 ①硬件环境 实验共使用三台PC机,一台机器用作NameNode,另两台用作DateNode。 ②软件环境 软件统一安装在虚拟机系统VMware上, Linux系统采用Ubuntu,jdk使用jdk1.6.0 版,Hadoop使用hadoop-0.20.2版本。 1.安装环境 2.准备工作 ①虚拟机VMware的安装 下载安装软件并分别在3台机器上安装。由于3台机器的某盘剩余空间都较大,统一将VMware安装在某盘上,分配磁盘空间时统一分配为10G。 ② Ubuntu的安装 新建虚拟机,加载Linux系统Ubuntu的iso镜像文件,并在VMware环境下安装Ubuntu 系统。 ③ Ubuntu简单设置 对Ubun

文档评论(0)

1亿VIP精品文档

相关文档