Flume 的监控方式

Posted yangxusun9

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Flume 的监控方式相关的知识,希望对你有一定的参考价值。

因为Flume是基于Java编写的,所以已经提供了基于JMX的服务实现,内置了MBean。

唯一需要做的就是启动JMX服务,使用工具,或写代码,向JMX的monitor服务发送请求,获取其中的MBean。

一、基于JCONSOLE查看MBean

1、在conf/flume.env.sh中进行配置

export JAVA_OPTS="-Dcom.sun.management.jmxremote -Dcom.sun.management.jmxremote.port=5445 -Dcom.sun.man
agement.jmxremote.authenticate=false -Dcom.sun.management.jmxremote.ssl=false"

2、运行agent

3、打开jconsole工具,在远程连接那输入主机名及端口号

技术图片

 

 二、基于Json的监控

1、在conf/flume.env.sh中进行配置或者在启动命令中加入“-Dflume.monitoring.type=http -Dflume.monitoring.port=34545”

export JAVA_OPTS="-Dcom.sun.management.jmxremote -Dcom.sun.management.jmxremote.port=5445 -Dcom.sun.man
agement.jmxremote.authenticate=false -Dcom.sun.management.jmxremote.ssl=false
-Dflume.monitoring.type=http -Dflume.monitoring.port=34545

2、启动agent

3、打开浏览器,登录34545端口查看Json代码

以上是关于Flume 的监控方式的主要内容,如果未能解决你的问题,请参考以下文章

flume 监控目录操作

flume监控分析

Flume监控系统源码研究

如何监控flume的重复读取数据的问题

flume 监控hive日志文件

open-falcon监控Flume