码迷,mamicode.com
首页 > 其他好文 > 详细

hive列转行

时间:2015-03-28 15:34:17      阅读:107      评论:0      收藏:0      [点我收藏+]

标签:

一、问题

hive如何将

a       b       1
a       b       2
a       b       3
c       d       4
c       d       5
c       d       6

变为:

a       b       1,2,3
c       d       4,5,6

二、数据

 test.txt

cat column_row.txt
a,b,1 
a,b,2 
a,b,3 
c,d,4 
c,d,5 
c,d,6

三、答案

1. 建表

create table tmp.column_row
(
  col1 string,
  col2 string,
  col3 string
)
row format delimited fields terminated by ,
stored as textfile;

2. 载入数据

load data local inpath /tmp/column_row.txt into table tmp.column_row;

3. 处理

select col1,col2,concat_ws(,,collect_set(col3)) 
from tmp.column_row
group by col1,col2;

结果是:

a       b       2 ,3 ,1 
c       d       6,4 ,5 

 

hive列转行

标签:

原文地址:http://www.cnblogs.com/liqiu/p/4374238.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!