如何在 Apache nifi 中配置 convertrecord 处理器,以便将 JSON 转换为 AVRO 格式

Posted

技术标签:

【中文标题】如何在 Apache nifi 中配置 convertrecord 处理器,以便将 JSON 转换为 AVRO 格式【英文标题】:how to configure convertrecord processor in Apache nifi so that it convert JSON to AVRO format 【发布时间】:2020-09-18 16:03:53 【问题描述】:

无法弄清楚如何配置此处理器以将传入的 JSON twitter 数据转换为 Avro 以将该数据放入配置单元表中

请帮忙

提前谢谢你。

【问题讨论】:

【参考方案1】:

@RishiPandey

ConvertJsonToAvro 是您需要的处理器。

【讨论】:

该处理器在当前版本的 NiFi 中不可用 当然可以。所有处理器都支持 NiFi。你所拥有的可能是一个捆绑版本,其中 cloudera 控制文件大小并取出他们在版本中不想要的东西。您可以从任何以前的版本自行添加自定义处理器。 您能告诉我如何就我在 nifi 中创建的数据流中的问题与您联系 真的需要帮助... 您可以直接联系我:steven@dfheinz.com

以上是关于如何在 Apache nifi 中配置 convertrecord 处理器,以便将 JSON 转换为 AVRO 格式的主要内容,如果未能解决你的问题,请参考以下文章

NIFI Apache NiFI 授权配置

我们在 Apache NiFi 的 PutHDFS 处理器中配置凭证的位置

NIFI Apache NiFI 使用技巧

Apache NiFi之Kafka流数据到HBase

如何在 Apache NiFi 中管理、排序和过滤大量流?

如何在 Apache Nifi 中合并分区的 Json