码迷,mamicode.com
首页 > 其他好文 > 详细

关于ETL的几种运行

时间:2017-01-09 21:38:03      阅读:188      评论:0      收藏:0      [点我收藏+]

标签:resource   home   ado   app   images   hdfs   项目   http   hbase   

一:代码部分

1.新建maven项目

 

2.添加需要的java代码

 

3.书写mapper类

 

4.书写runner类

 

二:运行方式

1.本地运行

2.

3.

 

三:本地运行方式

1.解压hadoop到本地

  技术分享

 

2.修改配置文件HADOOP_HOME

  技术分享

 

3.解压common的压缩包

  技术分享

 

 4.将压缩包的内容拷贝到bin下

  技术分享

 

5.前提

  在resource中必须存在core和Hbase的site文件

  技术分享

 

6.上传数据

  新建目录/eventLogs/2015/12/20

  上传到linux

  技术分享

  上传到HDFS

  

7.

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

  

 

关于ETL的几种运行

标签:resource   home   ado   app   images   hdfs   项目   http   hbase   

原文地址:http://www.cnblogs.com/juncaoit/p/6266524.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!