平衡器在 hdfs HA 中不起作用
Posted
技术标签:
【中文标题】平衡器在 hdfs HA 中不起作用【英文标题】:Balancer not working in hdfs HA 【发布时间】:2016-04-20 20:13:25 【问题描述】:当我尝试运行平衡器时:
HADOOP_USER_NAME=hdfs hdfs --config /etc/hadoop/conf.balancer/conf/ balancer -threshold 5
或
HADOOP_USER_NAME=hdfs hdfs balancer -fs hdfs://hdp
我收到以下错误:
java.io.IOException:另一个 Balancer 正在运行
当然,我已经阅读了有关此错误的信息,目前我认为我已经找到了解决方案:
https://community.hortonworks.com/articles/4595/balancer-not-working-in-hdfs-ha.html
但是,当我应用此解决方案时.. 我收到新错误:
java.io.IOException:无法创建代理提供程序类 org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider。
而且每个 hadoop 命令都会给出错误异常:
hadoop fs -ls /
-ls: java.net.UnknownHostException: hdp
.
【问题讨论】:
【参考方案1】:发布答案可能对某人有用。
此解决方案有效:balancer-not-working-in-hdfs-ha.html
只是,请记住删除单个NN的rpc并且不要触摸HA设置。
【讨论】:
以上是关于平衡器在 hdfs HA 中不起作用的主要内容,如果未能解决你的问题,请参考以下文章
Hadoop Streaming Job 在 OOzie 中不起作用
ES2015“导入”在带有 --harmony_modules 选项的节点 v6.0.0 中不起作用
HIVE - “skip.footer.line.count”在 Impala 中不起作用