Apache版本的Hadoop HA集群启动详细步骤包括ZookeeperHDFS HAYARN HAHBase HA(图文详解)

Posted zlslch

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Apache版本的Hadoop HA集群启动详细步骤包括ZookeeperHDFS HAYARN HAHBase HA(图文详解)相关的知识,希望对你有一定的参考价值。

 

 

    不多说,直接上干货!

 

 

 

  1、先每台机器的zookeeper启动(bigdata-pro01.kfk.com、bigdata-pro02.kfk.com、bigdata-pro03.kfk.com)

 

 

  2、启动zkfc(bigdata-pro01.kfk.com上)
  [[email protected] hadoop-2.6.0]$ pwd
  /opt/modules/hadoop-2.6.0
  [[email protected] hadoop-2.6.0]$ sbin/hadoop-daemon.sh start zkfc


 

 

 

  则,见【撰写的】https://www.cnblogs.com/zlslch/p/9191012.html

 

 

  

全网最详细的启动或格式化zkfc时出现java.net.NoRouteToHostException: No route to host ... Will not attempt to authenticate using SASL (unknown error)错误的解决办法(图文详解)

  则,见【撰写的】https://www.cnblogs.com/zlslch/p/9192800.html

 

 

 

 

 

 

 

  3、启动hadoop和yarn(bigdata-pro01.kfk.com上)【包括HDFS HA 和 YARN HA】
  [[email protected] hadoop-2.6.0]$ sbin/start-all.sh

 

    bigdata-pro01.kfk.com机器的actice状态

技术分享图片

 

 

 

 

 

 

 

 

 

   bigdata-pro02.kfk.com机器的standby状态

技术分享图片

 

 

 

 

 

 

 

 

 


  4、启动hbase(bigdata-pro01机器上)
  [[email protected] hbase-0.98.6-cdh5.3.0]$ bin/start-hbase.sh
  starting master, logging to /opt/modules/hbase-0.98.6-cdh5.3.0/bin/../logs/hbase-kfk-master-bigdata-pro01.kfk.com.out
  bigdata-pro03.kfk.com: starting regionserver, logging to /opt/modules/hbase-0.98.6-cdh5.3.0/bin/../logs/hbase-kfk-regionserver-bigdata-pro03.kfk.com.out
  bigdata-pro02.kfk.com: starting regionserver, logging to /opt/modules/hbase-0.98.6-cdh5.3.0/bin/../logs/hbase-kfk-regionserver-bigdata-pro02.kfk.com.out
  bigdata-pro01.kfk.com: starting regionserver, logging to /opt/modules/hbase-0.98.6-cdh5.3.0/bin/../logs/hbase-kfk-regionserver-bigdata-pro01.kfk.com.out
  [[email protected] hbase-0.98.6-cdh5.3.0]$

 

     bigdata-pro01.kfk.com机器的HMaster状态

 技术分享图片

 

 

 

 

 

 

 

 

 

 

     bigdata-pro01.kfk.com机器的HRegion server状态

 技术分享图片

 

 

 

 

 

 

 

 

 

 

 

 

     bigdata-pro02.kfk.com机器的HRegion server状态

技术分享图片

 

 

 

 

 

 

 

 

 

 

     bigdata-pro03.kfk.com机器的HRegion server状态

技术分享图片

 

 

 

 

 

 

 

 

    然后,启动HBase HA。

技术分享图片

[[email protected] hbase-0.98.6-cdh5.3.0]$ bin/hbase-daemon.sh start master
starting master, logging to /opt/modules/hbase-0.98.6-cdh5.3.0/bin/../logs/hbase-kfk-master-bigdata-pro02.kfk.com.out
[[email protected]-pro02 hbase-0.98.6-cdh5.3.0]$ jps
3018 NodeManager
2623 QuorumPeerMain
2787 DataNode
4088 Jps
4046 HMaster
2722 NameNode
3685 HRegionServer
2874 JournalNode
[[email protected]-pro02 hbase-0.98.6-cdh5.3.0]$ 

 

 

 

 

 

 

 

技术分享图片

 

 

 

 

 

技术分享图片

 

 

 

 

 

 

 

 

 

 

 

欢迎大家,加入我的微信公众号:大数据躺过的坑        人工智能躺过的坑
 
 
 

同时,大家可以关注我的个人博客

   http://www.cnblogs.com/zlslch/   和     http://www.cnblogs.com/lchzls/      http://www.cnblogs.com/sunnyDream/   

   详情请见:http://www.cnblogs.com/zlslch/p/7473861.html

 

  人生苦短,我愿分享。本公众号将秉持活到老学到老学习无休止的交流分享开源精神,汇聚于互联网和个人学习工作的精华干货知识,一切来于互联网,反馈回互联网。
  目前研究领域:大数据、机器学习、深度学习、人工智能、数据挖掘、数据分析。 语言涉及:Java、Scala、Python、Shell、Linux等 。同时还涉及平常所使用的手机、电脑和互联网上的使用技巧、问题和实用软件。 只要你一直关注和呆在群里,每天必须有收获

 

      对应本平台的讨论和答疑QQ群:大数据和人工智能躺过的坑(总群)(161156071)技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片 

 

技术分享图片

 

 

 

 

 

技术分享图片

 

 

 

 

 

 技术分享图片

 

以上是关于Apache版本的Hadoop HA集群启动详细步骤包括ZookeeperHDFS HAYARN HAHBase HA(图文详解)的主要内容,如果未能解决你的问题,请参考以下文章

超详细!Apache Hadoop 完全分布式集群,实现 NNRM 的高可用

spark(HA)集群安装

spark(HA)集群安装

Hadoop HA集群 NameNode 无法自动故障转移(切换active)

hadoop-ha+zookeeper+hbase+hive+sqoop+flume+kafka+spark集群安装

spark(HA)集群安装,算子,及与hive交互