大数据之Hbase:MemStore Flush机制

Posted 2021-06-26 浊酒南街

目录

• 1.MemStore Flush

1.MemStore Flush

MemStore刷写时机:
1.当某个memstroe的大小达到了hbase.hregion.memstore.flush.size（默认值128M），其所在region的所有memstore都会刷写。
2.当region server中memstore的总大小达到hbase.regionserver.global.memstore.size（默认值0.4）;
3. 到达自动刷写的时间，也会触发memstore flush。自动刷新的时间间隔由该属性进行配置hbase.regionserver.optionalcacheflushinterval（默认1小时）。
4.当WAL文件的数量超过hbase.regionserver.max.logs，region会按照时间顺序依次进行刷写，直到WAL文件数量减小到hbase.regionserver.max.log以下（该属性名已经废弃，现无需手动设置，最大值为32）。