Hadoop集群数据均衡之磁盘间数据均衡

Posted 刘元涛

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hadoop集群数据均衡之磁盘间数据均衡相关的知识,希望对你有一定的参考价值。

生产环境,由于硬盘空间不足,往往需要增加一块硬盘。刚加载的硬盘没有数据时,可以执行磁盘数据均衡命令。(Hadoop3.x新特性)

plan后面带的节点的名字必须是已经存在的,并且是需要均衡的节点。

如果节点不存在,会报如下错误:

如果节点只有一个硬盘的话,不会创建均衡计划:

(1)生成均衡计划

hdfs diskbalancer -plan hadoop102

(2)执行均衡计划

hdfs diskbalancer -execute hadoop102.plan.json

(3)查看当前均衡任务的执行情况

hdfs diskbalancer -query hadoop103

(4)取消均衡任务

hdfs diskbalancer -cancel hadoop102.plan.json

 

以上是关于Hadoop集群数据均衡之磁盘间数据均衡的主要内容,如果未能解决你的问题,请参考以下文章

大数据——Hadoop集群调优

大数据技术之Hadoop(生产调优手册)

大数据技术之Hadoop(生产调优手册)

Hadoop新增节点后HDFS数据均衡操作

Hadoop-生产调优手册

Hadoop-生产调优手册