hadoop2.x大数据系列课程(五)mapreduce实战案例集锦.pptVIP

  • 11
  • 0
  • 约小于1千字
  • 约 11页
  • 2017-02-04 发布于天津
  • 举报

hadoop2.x大数据系列课程(五)mapreduce实战案例集锦.ppt

hadoop2.x大数据系列课程(五)mapreduce实战案例集锦

Hadoop 2.x大数据系列课程(五) MapReduce实战案例集锦 课程内容 使用MRUnit进行单元测试 数据去重 数据排序 每个部门的平均工资 自连接操作 多表查询 倒排索引 前提条件 HDFS MapReduce开发 测试数据 部门表 员工表 使用MRUnit进行单元测试 使用的时候需要从官网/下载jar包 基本原理是JUnit和EasyMock,其核心的单元测试依赖于JUnit,并且MRUnit实现了一套Mock对象来控制MapReduce框架的输入和输出;语法也比较简单。 注意:需要把mockito-all-1.8.5.jar从Build Path中去掉 数据去重 一个列的去重 多个列的去重 数据排序 基本数据类型的排序 一个列的排序 多个列的排序 每个部门的平均工资 自连接操作 多表查询 倒排索引

文档评论(0)

1亿VIP精品文档

相关文档