码迷,mamicode.com
首页 > 其他好文 > 详细

大数据学习——数据流程图

时间:2019-01-02 23:28:02      阅读:243      评论:0      收藏:0      [点我收藏+]

标签:数据采集   ado   导入导出   pre   导入   src   大数   red   com   

技术分享图片

 

1)         数据采集:定制开发采集程序,或使用开源框架FLUME

2)         数据预处理:定制开发mapreduce程序运行于hadoop集群

3)         数据仓库技术:基于hadoop之上的Hive

4)         数据导出:基于hadoop的sqoop数据导入导出工具

5)         数据可视化:定制开发web程序或使用kettle等产品

6)         整个过程的流程调度:hadoop生态圈中的oozie工具或其他类似开源产品

大数据学习——数据流程图

标签:数据采集   ado   导入导出   pre   导入   src   大数   red   com   

原文地址:https://www.cnblogs.com/feifeicui/p/10211658.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!