streamsets 记录header 属性

record 的header 属性可以在pipeline 逻辑中使用。
有写stages 会为了特殊目录创建reord header 属性,比如(cdc)需要进行crud 操作类型的区分
你可以使用一些processor 去创建或者更新record 的header 属性信息

一个简单的header处理图

参考资料

https://streamsets.com/documentation/datacollector/latest/help/datacollector/UserGuide/Pipeline_Design/RecordHeaderAttributes.html#concept_wn2_jcz_dz

猜你喜欢

转载自www.cnblogs.com/rongfengliang/p/9506023.html