hadoop 多文件夹输入，map到reduce怎样排序

时间：2017-05-31 20:07:14 阅读：346 评论：0 收藏：0 [点我收藏+]

使用MultipleInputs.addInputPath 对多个路径输入

如今如果有三个文件夹，并使用了三个mapper去处理，

经过map处理后，输出的结果会依据key 进行join，

假设使用TextPair，会依据第一个字段jion。第二个字段排序

然后在作为reduce的输入，进行计算

原文：http://www.cnblogs.com/liguangsunls/p/6925644.html

踩

(0)

评论一句话评论（0）

分享档案

更多>