SparkSpark kafka because consumer rebalance same group id joined different streaming

Posted 九师兄

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了SparkSpark kafka because consumer rebalance same group id joined different streaming相关的知识，希望对你有一定的参考价值。

文章目录

本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。

1.概述

spark读取kafka ，然后使用不同的消费组，居然报错如下

看报错是说不同的stream要使用不同的groupid，但是我两个任务使用了不同的groupID啊 为啥还是会报这个错

以上是关于SparkSpark kafka because consumer rebalance same group id joined different streaming的主要内容，如果未能解决你的问题，请参考以下文章

SparkSpark一些面试题

Kafka报错ERROR Shutdown broker because all log dirs in ... have failed

SparkSpark 及 Scala 语法简要介绍

SparkSpark Core 基本原理

SparkSpark Streaming

SparkSpark ShuffleSpark SQL 及 Spark MLlib