MapReduce模型--自定义数据类型.pdfVIP

海数科技，数据处理专家！ 海数科技Hadoop 大数据处理文献 MapReduce 模型：自定义数据类型 说明： 我们知道，Java与Hadoop有一个字段映射关系，如Java中的String对应Hadoop中的Text。通过自定义 数据类型，可以使用Hadoop处理单表数据查询以及多表相互关联的应用场景。 自定义的数据类型必须实现WritableComparable接口。 1、自定义一个Person数据类型 public class Person implements WritableComparablePerson { int id; //模拟表的字段 String name; int age; String city; static { // Key的比较器，用于进行Key值比较 WritableComparator.define(Person.class, new PersonComparator()); } //定义常量，用于传递参数 public static final String P_AGE = AGE; public static final String P_ID = ID; public int hashCode() { return super.hashCode(); } public boolean equals(Object obj) { return super.equals(obj); } //Set,get方法，此处略 //一定要有该构造函数 public Person() { 海数科技，专注Hadoop 大数据处理、Oracle 数据库运维！ 海数科技，数据处理专家！ ; } //字符串解析 public Person(String value) { String[] infos = null; if (value != null) { infos = value.split(,); this.id = Integer.parseInt(infos[0]); = infos[1]; this.age = Integer.parseInt(infos[2]); this.city = infos[3]; } } @Override必须实施的方法 public void write(DataOutput in) throws IOException { in.writeInt(id); in.writeUTF(name); in.writeInt(age); in.writeUTF(city); } @Override必须实施的方法 public void readFields(DataInput out) throws IOException { id = out.readInt(); name = out.readUTF(); age = out.readInt(); city = out.readUTF(); } 海数科技，专注Hadoop 大数据处理、Oracle 数据库运维！ 海数科技，数据处理专家！ //数据存储 public