实战大数据(hadoop+spark+flink)MapReduce运行环境准备.docx

实战大数据(hadoop+spark+flink)MapReduce运行环境准备.docx

MapReduce在Windows下运行的环境准备

1.1.配置hadoop环境变量

Windows本地解压Hadoop压缩包,然后像配置JDK环境变量一样在系统环境变量里配置HADOOP_HOME和path环境变量。

注意:hadoop安装目录尽量不要包含空格或者中文字符。

1.2.下载hadoop对应版本补丁

MapReduce程序在Linux、mac系统中可以直接运行,但无法直接在Windows下运行,因为MapReduce代码在Windows下运行存在bug,需要添加hadoop补丁才可以。Hadoop补丁下载地址:/cdarlint/winutils

Hadoop补丁文件为ha

文档评论(0)

1亿VIP精品文档

相关文档