廈门大学-林子雨-大数据技术基础-第7章MapReduce-上机练习-MapReduce编程初级实践.docVIP

厦门大学计算机科学系研究生课程 《大数据技术原理与应用》 上机练习 MapReduce编程初级实践 主讲教师：林子雨 厦门大学数据库实验室 二零一五年九月 目录 1 作业题目 1 2 作业目的 1 3 作业性质 1 4 作业考核方法 1 5 作业提交日期与方式 1 6 实验平台 1 7 实验内容和要求 1 8 实验报告 4 附录1:任课教师介绍 4 附录2：课程教材介绍 5 《大数据技术原理与应用》 MapReduce编程初级实践 上机练习说明 主讲教师：林子雨 E-mail: ziyulin@ 个人主页：/linziyu 作业题目 MapReduce编程初级实践。 作业目的 1.通过实验掌握基本的MapReduce编程方法； 2.掌握用MapReduce解决一些常见的数据处理问题，包括数据去重、数据排序和数据挖掘等。 作业性质 课后作业，必做，作为课堂平时成绩。 作业考核方法 提交上机实验报告，任课老师根据上机实验报告评定成绩。 作业提交日期与方式 林子雨编著《大数据技术原理与应用》教材第七章MapReduce内容结束后的下一周周六晚上9点之前提交。 实验平台 已经配置完成的Hadoop伪分布式环境。 实验内容和要求 1.编程实现文件合并和去重操作 对于两个输入文件，即文件A和文件B，请编写MapReduce程序，