如何使用 JMX 导出器将 JMX 指标从 Kafka 消费者推送到普罗米修斯

Posted

技术标签:

【中文标题】如何使用 JMX 导出器将 JMX 指标从 Kafka 消费者推送到普罗米修斯【英文标题】:How to push JMX metrics using JMX exporter from Kafka consumer to prometheus 【发布时间】:2021-06-20 01:47:33 【问题描述】:

如何使用 JMX 导出器将 JMX 指标从 Kafka 消费者推送到 prometheus,而无需对 kafka 服务器端进行任何更改

【问题讨论】:

【参考方案1】:

Kafka 服务器不负责公开消费者客户端指标,JMX 导出器是拉取的,而不是推送的,这取决于您如何配置 Prometheus 服务器 指标抓取工具

关于如何获取消费者指标 - 在运行消费者时将 JMX 导出器添加到 JVM 参数中,就像您可能正在监控的任何其他 Java 客户端一样,然后修改您的爬虫以发现消费者端点


如果你真的想将数据推送到 Prometheus,那就需要 PushGateway

【讨论】:

以上是关于如何使用 JMX 导出器将 JMX 指标从 Kafka 消费者推送到普罗米修斯的主要内容,如果未能解决你的问题,请参考以下文章

使用 Jmx Exporter for Prometheus 缺少 Kafka Connect 指标

Prometheus jmx 导出器模式匹配属性和项目

JMX 导出器和 Prometheus

kafka 和 JMX 导出器

有没有办法配置要使用 jmx_exporter/prometheus 捕获的 kafka-connect jmx 指标?

有没有办法检测 FAILED kafka connect 任务