Logstash Output(二)Kafka

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Logstash Output(二)Kafka相关的知识,希望对你有一定的参考价值。

参考技术A Kafka也是Logstash的常用输出之一,一般拿来作数据的中转。
常规的Kafka输出配置文件如下所示:

logstash-out-kafka 的其他配置还包括:

logstash-kafka 插件输入和输出默认 codec 为 json 格式。在输入和输出的时候注意下编码格式。消息传递过程中 logstash 默认会为消息编码内加入相应的时间戳和 hostname 等信息。如果不想要以上信息(一般做消息转发的情况下),可以使用以下配置,例如:

以上是关于Logstash Output(二)Kafka的主要内容,如果未能解决你的问题,请参考以下文章

logstash_output_kafka:Mysql同步Kafka深入详解

编译安装 logstash-output-jdbc

Logstash写入MongoDB数据库

logstash的output插件

logstash的output插件

Logstash数据处理服务的输出插件Output配置参数详解