码迷,mamicode.com
首页 > 其他好文 > 详细

streamsets excel 数据处理

时间:2018-08-21 10:49:14      阅读:383      评论:0      收藏:0      [点我收藏+]

标签:ide   数据格式   配置   处理   tar   资料   none   display   div   

streamsets 有一个directory的origin 可以方便的进行文件的处理,支持的格式也比较多,使用简单

pipeline flow

技术分享图片

配置

  • excel 数据copy

    因为使用的是容器,会有数据copy 容器的一步

容器id 结合实际查询:
docker cp data/ containerid:/data/excel
  • 配置directory
    技术分享图片
    技术分享图片
  • local fs 配置
    技术分享图片

运行

  • excel 数据格式
    技术分享图片
  • 运行效果
    技术分享图片
    技术分享图片

参考资料

https://github.com/rongfengliang/streamsets-demos
https://streamsets.com/documentation/datacollector/latest/help/datacollector/UserGuide/Origins/Directory.html#concept_qcq_54n_jq

streamsets excel 数据处理

标签:ide   数据格式   配置   处理   tar   资料   none   display   div   

原文地址:https://www.cnblogs.com/rongfengliang/p/9509467.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!