码迷,mamicode.com
首页 > 其他好文 > 详细

02-开始建表_离线数仓项目

时间:2020-06-29 15:46:05      阅读:62      评论:0      收藏:0      [点我收藏+]

标签:put   NPU   line   pac   nbsp   load   exti   key   partition   

 

一.  建表,导数据

1. 创建库

create database gmall;

 

2. 创建表start_log,ods层表

drop table if exists ods_start_log;
CREATE EXTERNAL TABLE ods_start_log (`line` string)
PARTITIONED BY (`dt` string)
STORED AS
  INPUTFORMAT com.hadoop.mapred.DeprecatedLzoTextInputFormat
  OUTPUTFORMAT org.apache.hadoop.hive.ql.io.HiveIgnoreKeyTextOutputFormat
LOCATION /warehouse/gmall/ods/ods_start_log;

3. 导入数据

load data inpath /origin_data/gmall/log/topic_start/2020-06-29 into table gmall.ods_start_log partition(dt=2020-06-29);

 

创建event_log

drop table if exists ods_event_log;
CREATE EXTERNAL TABLE ods_event_log(`line` string)
PARTITIONED BY (`dt` string)
STORED AS
  INPUTFORMAT com.hadoop.mapred.DeprecatedLzoTextInputFormat
  OUTPUTFORMAT org.apache.hadoop.hive.ql.io.HiveIgnoreKeyTextOutputFormat
LOCATION /warehouse/gmall/ods/ods_event_log;

 

 

load data inpath /origin_data/gmall/log/topic_event/2020-06-29 into table gmall.ods_event_log partition(dt=2020-06-29);

 

二.导入数据到ods层中,通过脚本导入

 

02-开始建表_离线数仓项目

标签:put   NPU   line   pac   nbsp   load   exti   key   partition   

原文地址:https://www.cnblogs.com/mengbin0546/p/13207443.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!