首页 > 编程语言 > 详细

hadoop 多文件夹输入，map到reduce怎样排序

时间：2017-05-31 20:14:05 阅读：194 评论：0 收藏：0 [点我收藏+]

标签：span mapper track air div post color 输出 data-

使用MultipleInputs.addInputPath 对多个路径输入

如今如果有三个文件夹，并使用了三个mapper去处理，

经过map处理后，输出的结果会依据key 进行join，

假设使用TextPair，会依据第一个字段jion。第二个字段排序

然后在作为reduce的输入，进行计算

hadoop 多文件夹输入，map到reduce怎样排序

标签：span mapper track air div post color 输出 data-

原文地址：http://www.cnblogs.com/liguangsunls/p/6925644.html

踩

(0)

赞

(0)

举报

评论一句话评论（0）

分享档案

更多>

2021年07月29日 (22)
2021年07月28日 (40)
2021年07月27日 (32)
2021年07月26日 (79)
2021年07月23日 (29)
2021年07月22日 (30)
2021年07月21日 (42)
2021年07月20日 (16)
2021年07月19日 (90)
2021年07月16日 (35)

周排行

更多

友情链接

兰亭集智国之画百度统计站长统计阿里云 chrome插件新版天听网

关于我们 - 联系我们 - 留言反馈

© 2014 mamicode.com 版权所有联系我们:gaon5@hotmail.com

迷上了代码！