IBM AIX - 阿帕奇卡夫卡

Posted

技术标签:

【中文标题】IBM AIX - 阿帕奇卡夫卡【英文标题】:IBM AIX - Apache Kafka 【发布时间】:2018-01-05 12:56:33 【问题描述】:

我有一个 IBM AIX 案例,需要将系统日志、文件中的日志以及可能的应用程序日志发送到 Apache Kafka,这可能吗? 我尝试搜索有关 nxlog 的内容,但他没有输出到 Kafka for AIX 还有其他解决方案吗?

【问题讨论】:

How to read logs from file in kafka?的可能重复 @JimWright,主题“如何在 Kafka 中读取文件中的日志?”不能解决我的问题 “需要将系统日志、文件中的日志以及可能的应用程序日志发送到 Apache Kafka”? 【参考方案1】:

您可以使用 Kafka Connect(它是 Apache Kafka 的一部分)将各种数据流式传输到(和输出)Apache Kafka。有connectors here的列表,包括log files和syslog。

【讨论】:

文件连接器不处理滚动文件(日志文件的常见做法)

以上是关于IBM AIX - 阿帕奇卡夫卡的主要内容,如果未能解决你的问题,请参考以下文章

RabbitMQ 一二事 - 简单队列使用

卡夫卡与风暴:卡夫卡和风暴的明智比较

卡夫卡流与卡夫卡消费者如何决定使用啥

卡夫卡:如何在卡夫卡实现循环分区

卡夫卡旋转垃圾收集日志

卡夫卡饥饿艺术家