FlinkFlink RocksDB内存占用一直增大 state.backend.rocksdb.memory.managed

Posted 2021-12-10 九师兄

文章目录

• 1.概述

本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。

1.概述

有人遇到过RocksDB内存占用一直增大的情况吗？flink-1.13.1 版本

为什么要关掉托管内存？

iterator读并发比较高的场景，会锁定内存中的数据。关掉托管空出多点内存空间，是比较粗暴的处理方式，但很有效。有性能方面的问题再去调整rocksdb配置

如果开启rocksdb statebackend ，并且没有打开增量就会有这个问题。

配置为

state.backend.rocksdb.memory.managed