flinkflink 消费组死掉 Lag不变 kafka不提交 重启恢复 非常诡异

Posted 2021-12-24 九师兄

文章目录

• 1.场景1
• • 1.1 钙素
• 2.场景2
• 2.场景2

1.场景1

1.1 钙素

是这样的，我有一个环境，遇到一个这样的现象，flink任务运行了 13天了，然后看消费组状态的时候 发现lag很大 多次查看都一样

然后重启了一下任务，消费组没改，然后lag变成 一百以内了，关键是

1. 没改消费组
2. 没有checkpoint 就是普通的额流任务
3. 数据写入曲线正常