Cassandra Error message: Not marking nodes down due to local pause.

Posted 2020-09-25

这个error可能会在很多时候遇到哦，看到的例子是在replace 300GB的node时候遇到了. 看到的log如下

var/log/cassandra/output.log:WARN 13:44:31,868 Not marking nodes down due to local pause of 53690474502 > 500000000
导致这个问题的最根本原因是gc, 也就是发生了非常长时间的gc, 导致整个系统hang住了
https://issues.apache.org/jira/browse/CASSANDRA-9183
https://issues.apache.org/jira/browse/CASSANDRA-9218
所有的gc都是由于当时有很多的task在做导致的，所以根本上还是要去看下当时是否有其他的heavy task；
执行nodetool tpstats/ nodetool netstats看看在做什么;

这里的log有点奇怪，显示的竟然是WARN, 而不是ERROR;