如何在ui上查看storm集群和任务

Posted brainstorm

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了如何在ui上查看storm集群和任务相关的知识,希望对你有一定的参考价值。

主页面上,
cluster summary:集群的概况
nimbus summary:
Supervisor Summary:
Nimbus Configuration

Topology Summary:最重要的
有个search窗口,根据storm任务的topology name,搜索到对应任务,点击进入
一个storm集群上跑的任务的topology name 是唯一的,否则提交会出错
点击到一个具体topology页面之后,

Topology summary:概况
Topology actions:对topology可以在页面进行操作
Topology stats:最近不同时间段的统计数据
spouts:所有的不同的spout,每个spout对应总共有多少executor,总共有多少个task,每个executor运行的task数量等于两者相除
    想查看具体某个spout或者bolt (都属于component)的运行情况,只需要点击对应id上的链接
        Component summary:
        Component actions:对这个component进行操作
        Spout stats:不同时间窗口的统计结果
        Output stats:总的输出的统计
        Executors:具体的执行线程,这个很重要
            点击具体某个executor的port连接,可以查看日志
            这个上面打出来的日志,是包含整个worker进程所有executor线程的日志
bolts:同上
Worker Resources:具体的worker进程
Topology Visualization:可视化
Topology Configuration:整个topology的配置

以上是关于如何在ui上查看storm集群和任务的主要内容,如果未能解决你的问题,请参考以下文章

记一次storm提交任务遇到的坑

Storm 测试

Storm集群上的开发 ,Storm的内部原理,storm提交任务的过程

Storm配置运行

Storm集群上的开发 ,Topology任务的编写 之 WordCount Spout和Blot的分组策略(一张图说明问题)

Storm集群上的开发 ,Topology任务的编写 之 WordCountTopology数据流分析(storm编程模型)(一张图说明问题)