首页 > 其他分享> > MapReduce的分组topN高效实现 MapReduce的分组topN高效实现 2021-03-10 17:03:34 作者:互联网 利用MapReduce的排序机制来排序 自定义类型作为map输出的key,实现WritableComparable,重写compare方法,先比较字段1,再比较字段2,value为null 控制数据分区规则,自定义Partitioner的子类,重写getPartition方法,按字段1分区 控制分组规则,按字段1分组 标签:自定义,MapReduce,topN,按字段,分组,字段,重写 来源: https://www.cnblogs.com/lijiong/p/14512774.html