hbase 异常记录

Posted yjt1993

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hbase 异常记录相关的知识,希望对你有一定的参考价值。

1、进入hbase shell 报内存不足

  • 描述
    做hbase数据迁移的时候,需要在目标集群创建与源端集群相同的表以及表属性,同时通过bulkload的方式加载数据。
    目前迁移开启十个并发,一共迁移4千张表,失败了200+表的迁移。
    看来这种迁移还是不能起太多并发,否则导致hbase regionserver在加载数据的时候,报内存不足的问题
  • 报错信息如下:
    技术图片

不能分配内存

  • 解决
    清空缓存
echo 1 > /proc/sys/vm/overcommit_memory:问题解决





以上是关于hbase 异常记录的主要内容,如果未能解决你的问题,请参考以下文章

Hbase - kerberos认证异常

hbase使用中错误记录

Hbase delete遇到的常见异常: Exception in thread "main" java.lang.UnsupportedOperationException(代码

Hbase调优

记一次HBase RegionServer 经常挂掉 故障排查过程

使用实体框架迁移时 SQL Server 连接抛出异常 - 添加代码片段