streamsets 记录header 属性

Posted rongfengliang

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了streamsets 记录header 属性相关的知识,希望对你有一定的参考价值。

record 的header 属性可以在pipeline 逻辑中使用。
有写stages 会为了特殊目录创建reord header 属性,比如(cdc)需要进行crud 操作类型的区分
你可以使用一些processor 去创建或者更新record 的header 属性信息

一个简单的header处理图

技术分享图片

参考资料

https://streamsets.com/documentation/datacollector/latest/help/datacollector/UserGuide/Pipeline_Design/RecordHeaderAttributes.html#concept_wn2_jcz_dz

以上是关于streamsets 记录header 属性的主要内容,如果未能解决你的问题,请参考以下文章

StreamSets 相关文章

如何在 Jython Evaluator 中获取 StreamSets 记录字段类型

StreamSet的环境的初始化

AttributeError:“str”对象没有属性“items”

StreamSets学习系列之StreamSets是什么?

StreamSets学习系列之StreamSets的集群安装(图文详解)