码迷,mamicode.com
首页 > 其他好文 > 详细

MR的join连接操作

时间:2018-07-28 15:24:54      阅读:196      评论:0      收藏:0      [点我收藏+]

标签:自定义   str   nbsp   业务   卡尔   join   table   ble   red   

  多表连接:将连接键(id)作为k2,v2采用自定义的Writable,writable中包含以下字段:标志位字段+业务字段(可能多个);reduce端做笛卡尔积。

  自连接(单表关联):对于给定的数据的key value 调换,并作些标记予以区别。

 

  map端连接:

    1.前提条件:小表尽可能小,一般情况在几十兆下;

    2.DistributedCache:分布式缓存

MR的join连接操作

标签:自定义   str   nbsp   业务   卡尔   join   table   ble   red   

原文地址:https://www.cnblogs.com/lyr999736/p/9381701.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!