Storm集群上的开发 ,Storm的内部原理,storm提交任务的过程

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Storm集群上的开发 ,Storm的内部原理,storm提交任务的过程 相关的知识,希望对你有一定的参考价值。

storm提交任务的过程:

1.客户端通过storm提交topology

2.nimbus主节点创建本地topology任务目录。tmp

3.nimbus监控zookeeper心跳,计算工作量。

4.nimbus向zookeeper分配任务。

5.从节点监控zk的数据,一旦有新任务分配,启动任务topology。、

6.从zk上获取分配给自己的task任务,启动对应的worker进程。

技术分享

 

以上是关于Storm集群上的开发 ,Storm的内部原理,storm提交任务的过程 的主要内容,如果未能解决你的问题,请参考以下文章

Storm集群上的开发 ,Storm的内部原理,storm提交任务的过程

Storm集群上的开发 ,本地模式报错问题(插曲)

Storm集群上的开发 ,Topology任务的编写 之 WordCount程序的编写

Storm集群上的开发 ,Topology任务的编写 之 WordCountTopology数据流分析(storm编程模型)(一张图说明问题)

Storm集群上的开发 ,任务计算输出到mysql数据库,集成jdbc

Storm篇--Storm并发机制