现实微笑

文章
4
资源
0
加入时间
3年0月21天

用代码来理解MapReduce2_分组分区和combin优化

前言MapReduce框架让我们可以专注于算法逻辑,而不需要去关注代码实现但如果有需求,我们几乎可以自定义MR流程中的全部组件,如下大框架Mapper,Reducer,Runner,还有常用到的自定义类Bean分组逻辑GroupingComparator,分区逻辑Partitioner,Map端预聚合逻辑Combiner输入流InputFormat,输出流OutputFormat自...