2017.4.11 storm-kafka测试

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了2017.4.11 storm-kafka测试相关的知识,希望对你有一定的参考价值。

测试storm-starter里的TridentWordCount,测试storm-kafka模块,单独建立工程,

注意log4j-slf4j-impl-2.1引起的依赖冲突,之前运行报错都是因为在storm安装包的lib库里已经有这个jar包了,

编译topology的时候又有其他依赖于这个jar包的工程把它打包进来了,从而引发冲突,从工程中去除这个依赖就好了。、

然后storm-kafka里的TridentWordCount运行成功。到这里kafka-storm-hbase全部打通,剩下整合的问题。

单独建立一个工程,是数据从kafka经storm最终存储到hbase成功,只是数据梳理过程不是业务所需要的。

以上是关于2017.4.11 storm-kafka测试的主要内容,如果未能解决你的问题,请参考以下文章

storm-kafka 访问带 kerberos 权限的 kafka

Storm-Kafka 多个 spout,如何分担负载?

2017.4.11PM

2017.4.11下午

2017.4.11上午

review what i studied `date` - 2017-4-11