- 11
- 0
- 约小于1千字
- 约 11页
- 2017-02-04 发布于天津
- 举报
hadoop2.x大数据系列课程(五)mapreduce实战案例集锦
Hadoop 2.x大数据系列课程(五)MapReduce实战案例集锦 课程内容 使用MRUnit进行单元测试 数据去重 数据排序 每个部门的平均工资 自连接操作 多表查询 倒排索引 前提条件 HDFS MapReduce开发 测试数据 部门表 员工表 使用MRUnit进行单元测试 使用的时候需要从官网/下载jar包 基本原理是JUnit和EasyMock,其核心的单元测试依赖于JUnit,并且MRUnit实现了一套Mock对象来控制MapReduce框架的输入和输出;语法也比较简单。 注意:需要把mockito-all-1.8.5.jar从Build Path中去掉 数据去重 一个列的去重 多个列的去重 数据排序 基本数据类型的排序 一个列的排序 多个列的排序 每个部门的平均工资 自连接操作 多表查询 倒排索引
原创力文档

文档评论(0)