码迷,mamicode.com
首页 > 其他好文 > 详细

streamsets 记录header 属性

时间:2018-08-20 16:39:15      阅读:167      评论:0      收藏:0      [点我收藏+]

标签:set   bsp   att   data   处理   ati   技术分享   uid   bubuko   

record 的header 属性可以在pipeline 逻辑中使用。
有写stages 会为了特殊目录创建reord header 属性,比如(cdc)需要进行crud 操作类型的区分
你可以使用一些processor 去创建或者更新record 的header 属性信息

一个简单的header处理图

技术分享图片

参考资料

https://streamsets.com/documentation/datacollector/latest/help/datacollector/UserGuide/Pipeline_Design/RecordHeaderAttributes.html#concept_wn2_jcz_dz

streamsets 记录header 属性

标签:set   bsp   att   data   处理   ati   技术分享   uid   bubuko   

原文地址:https://www.cnblogs.com/rongfengliang/p/9506023.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!