大数据技术应用（国家） 技能点1：建立运行MapReduce程序的依赖环境 建立运行MapReduce程序的依赖环境-实训指导.docxVIP

PAGE2 / NUMPAGES4 建立运行MapReduce程序的依赖环境 建立运行MapReduce程序的依赖环境 摘 要：本章节开篇对介绍了本实验大数据平台以及对Ambari分布式架构的解析，搭建Hadoop环境，并且配置Hadoop插件使得本地与Hadoop环境建立连接。 关键词：搭建Hadoop环境；配置插件；连接Hadoop环境； 1. 设置“Hadoop installation directory” 依次点击：“Window”-“Preferences”-“Hahoop Map/Reduce”。 图1 Hadoop Map/Reduce 由于本实验的Hadoop是远程环境，所以只得将远程的Hadoop环境拷贝到本地目录，提供项目一些插件正常运行必须的jar包。 本实验Hadoop的安装路径在：172.18.44.14:/usr/hdp/2.6.1.0-129/hadoop，我们将这个目录下的所有文件借助工具传输到本地Windows上，保存在D:\hadoop下。 图2 本地Hadoop目录 回到eclipse，“Hadoop installation directory”填写“D:\hadoop”。 图3 设置Hadoop installation directory 点击“Apply and Close”保存配置。 2. 与远程Hadoop环境建立连接 图4 搜索Map/Reduce Locations 搜索Map/Reduce Locations（MapReduce Tools），点击之后屏幕下方出现如图所示“Map/Reduce Locations”面板。 图5 Map/Reduce Locations面板 在面板中右击“New Hadoop location...”，填写“Map/Reduce(v2) Master”和“DFS Master”（注：IP地址172.18.44.14为本实验远程Hadoop环境）。 图6 配置连接 重启eclipse。 3. 验证 依次点击：“Window”-“Show View”-“Project Explorer”，屏幕左边的面板中出现“DFS Locations”，出现如图所示的效果，视为插件添加成功。 图7 连接成功