hadoop2.2.0配置了HA,今天发现它自动切换了?啥原因

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hadoop2.2.0配置了HA,今天发现它自动切换了?啥原因相关的知识,希望对你有一定的参考价值。

参考技术A 如果你不太懂得话,就别配zookeeper了,active和standby搞不懂,用一个就行了

hadoop搭建HA集群之后不能自动切换namenode

在搭好HA集群之后,想测试一下集群的高可用性,于是先把active的namenode给停掉:

hadoop-daemon.sh stop namenode

或者直接kill掉该节点namenode的对应进程也可。

但是通过hdfs haadmin -getServiceState master1 查看,发现standby的namenode并没有自动切换成active,直到我把之前kill掉的namenode手动启动才会切换,但是这样就达不到高可用的目的啊。

在网上找了好久才发现原因,原来是在hdfs-site.xml通过参数dfs.ha.fencing.methods来实现,出现故障时通过哪种方式登录到另一个namenode上进行接管工作。如果采用默认的值sshfence的话,设置集群就无法自动切换。log信息的是无法连接到standby的amenode。

  <property>
          <name>dfs.ha.fencing.methods</name>
          <value>shell(/bin/true)</value>
  </property>

修改成上面的值后,问题解决,active的namenode被停掉后秒切到standby的namenode~

以上是关于hadoop2.2.0配置了HA,今天发现它自动切换了?啥原因的主要内容,如果未能解决你的问题,请参考以下文章

Hadoop2.2.0集群的HA高可靠的最简单配置

Hadoop HA 深度解析

Hadoop NameNode HA模式的搭建以及原理

分享一份关于Hadoop2.2.0集群环境搭建文档

甘道夫Ubuntu14 server + Hadoop2.2.0环境下Sqoop1.99.3部署记录

hadoop2.2.0伪分布式搭建3--安装Hadoop