hadoop-磁盘出现坏盘,如何能在线换盘

Posted roger888

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hadoop-磁盘出现坏盘,如何能在线换盘相关的知识,希望对你有一定的参考价值。

涉及到磁盘存储路径的配置文件参数有:

hdfs-site.xml

<name>dfs.datanode.data.dir</name>

yarn-site.xml

<name>yarn.nodemanager.local-dirs</name>

将这两个参数的value中的坏盘路径去掉,重启datanode、nodemanager就可以在线换盘了

虽然这样做要多重启一次hadoop进程,但是可以降低换盘对hadoop集群的影响(业务流程的运行及流程执行时间),因为你可以挑选集群相对空闲的时候启停hadoop进程

 

记住,换盘完成后,hadoop进程启动前,要把data.dir的目录建上、赋权(如果配置的存储目录,没有给hadoop用户赋权的话)

以上是关于hadoop-磁盘出现坏盘,如何能在线换盘的主要内容,如果未能解决你的问题,请参考以下文章

检查Symmetrix阵列的坏盘

检查Symmetrix阵列的坏盘

ssacli 换盘

ssacli 换盘

IBM DS4700 存储在线更换故障硬盘步骤及注意事项

Ceph之osd扩容和换盘