《大数据平台部署与应用》 项目实施课件 任务2.2 测试Hadoop平台.pptx

测试Hadoop平台;任务描述

在部署好Hadoop分布式平台后，小数还需要对其进行测试，以确保部署的完整性。MapReduce作为Hadoop的核心组件，可用于测试Hadoop平台的运行状况。本任务将通过向Hadoop集群提交MapReduce任务并观察其结果，以此来验证Hadoop的功能是否正常。

任务环境

已部署完全分布式Hadoop集群的3台CentOS7操作系统的虚拟机。;目录;现有一份某社交网站在2024年某一天的原始日志文件email_log.txt，共800万行记录，部分数据如下。;上传日志文件email_log.txt至HDFS的流程如下。;使用Xftp8远程传输工具将本