首页 > 其他好文 > 详细

hadoop 多目录输入，map到reduce如何排序

时间：2014-06-26 07:49:51 阅读：250 评论：0 收藏：0 [点我收藏+]

使用MultipleInputs.addInputPath 对多个路径输入

现在假设有三个目录，并使用了三个mapper去处理，

经过map处理后，输出的结果会根据key 进行join，

如果使用TextPair，会根据第一个字段jion，第二个字段排序

然后在作为reduce的输入，进行计算

原文地址：http://blog.csdn.net/smile0198/article/details/34534241

踩

(0)

评论一句话评论（0）

分享档案

更多>

周排行

更多

友情链接

兰亭集智国之画百度统计站长统计阿里云 chrome插件新版天听网

迷上了代码！