码迷,mamicode.com
首页 > 数据库 > 详细

db2导出数据并导入hive临时表中

时间:2017-04-24 23:05:44      阅读:438      评论:0      收藏:0      [点我收藏+]

标签:cep   txt   导出   near   设置   string   local   导出数据   bsp   

操作:

1、从db2 中导出数据到txt中

2、修改文件中的分隔符为“:”

3、在hive中新建表(建表时需要制定分隔符)

4、导入数据

--------

1、从db2 中导出数据到txt中

db2 -x "select col1,col2,col3  from tbl_name where xxx with ur">filename.txt

2、修改文件中的分隔符为“:”

cat filename.txt | awk ‘{print $1":"$2":"$3}‘>filename1.txt

3、在hive中新建表(建表时需要制定分隔符)

ROW FORMAT DELIMITED 分隔符设置开始语句

FIELDS TERMINATED BY:设置字段与字段之间的分隔符

COLLECTION ITEMS TERMINATED BY:设置一个复杂类型(array,struct)字段的各个item之间的分隔符

MAP KEYS TERMINATED BY:设置一个复杂类型(Map)字段的key value之间的分隔符

Hive> create table t(id struct<id1:int,id2:int,id3:int>,name array<string>,xx map<int,string>)
    > row format delimited
    > fields terminated by ‘\t‘
    > collection items terminated by ‘,‘
    > map keys terminated by ‘:‘
    > lines terminated by ‘\n‘;
OK
Time taken: 0.287 seconds

ROW FORMAT DELIMITED 必须在其它分隔设置之前,也就是分隔符设置语句的最前

LINES TERMINATED BY必须在其它分隔设置之后,也就是分隔符设置语句的最后,否则会报错

hive> create table t (id struct<id1:int,id2:int,id3:int>,name array<string>,xx map<int,string>) 
    > row format delimited
    > fields terminated by ‘\t‘
    > lines terminated by ‘\n‘
    > collection items terminated by ‘,‘
    > map keys terminated by ‘:‘;
FAILED: ParseException line 5:0 missing EOF at ‘collection‘ near ‘‘\n‘‘

4、导入数据至hive中

load data local inpath ‘filename1.txt‘ into table tbl_cdhd_usr_id_xxt_tmp 

db2导出数据并导入hive临时表中

标签:cep   txt   导出   near   设置   string   local   导出数据   bsp   

原文地址:http://www.cnblogs.com/xitingxie/p/6758950.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!