hadoop-磁盘出现坏盘,如何能在线换盘
Posted roger888
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hadoop-磁盘出现坏盘,如何能在线换盘相关的知识,希望对你有一定的参考价值。
涉及到磁盘存储路径的配置文件参数有:
hdfs-site.xml
<name>dfs.datanode.data.dir</name>
yarn-site.xml
<name>yarn.nodemanager.local-dirs</name>
将这两个参数的value中的坏盘路径去掉,重启datanode、nodemanager就可以在线换盘了
虽然这样做要多重启一次hadoop进程,但是可以降低换盘对hadoop集群的影响(业务流程的运行及流程执行时间),因为你可以挑选集群相对空闲的时候启停hadoop进程
记住,换盘完成后,hadoop进程启动前,要把data.dir的目录建上、赋权(如果配置的存储目录,没有给hadoop用户赋权的话)
以上是关于hadoop-磁盘出现坏盘,如何能在线换盘的主要内容,如果未能解决你的问题,请参考以下文章