码迷,mamicode.com
首页 > Web开发 > 详细

Apache版本的Hadoop HA集群启动详细步骤【包括Zookeeper、HDFS HA、YARN HA、HBase HA】(图文详解)

时间:2018-06-17 16:03:27      阅读:489      评论:0      收藏:0      [点我收藏+]

标签:str   error   reg   name   pytho   数据挖掘   info   standby   hbase   

 

 

    不多说,直接上干货!

 

 

 

  1、先每台机器的zookeeper启动(bigdata-pro01.kfk.com、bigdata-pro02.kfk.com、bigdata-pro03.kfk.com)

 

 

  2、启动zkfc(bigdata-pro01.kfk.com上)
  [kfk@bigdata-pro01 hadoop-2.6.0]$ pwd
  /opt/modules/hadoop-2.6.0
  [kfk@bigdata-pro01 hadoop-2.6.0]$ sbin/hadoop-daemon.sh start zkfc


 

 

 

  则,见【撰写的】https://www.cnblogs.com/zlslch/p/9191012.html

 

 

  

全网最详细的启动或格式化zkfc时出现java.net.NoRouteToHostException: No route to host ... Will not attempt to authenticate using SASL (unknown error)错误的解决办法(图文详解)

  则,见【撰写的】https://www.cnblogs.com/zlslch/p/9192800.html

 

 

 

 

 

 

 

  3、启动hadoop和yarn(bigdata-pro01.kfk.com上)【包括HDFS HA 和 YARN HA】
  [kfk@bigdata-pro01 hadoop-2.6.0]$ sbin/start-all.sh

 

    bigdata-pro01.kfk.com机器的actice状态

技术分享图片

 

 

 

 

 

 

 

 

 

   bigdata-pro02.kfk.com机器的standby状态

技术分享图片

 

 

 

 

 

 

 

 

 


  4、启动hbase(bigdata-pro01机器上)
  [kfk@bigdata-pro01 hbase-0.98.6-cdh5.3.0]$ bin/start-hbase.sh
  starting master, logging to /opt/modules/hbase-0.98.6-cdh5.3.0/bin/../logs/hbase-kfk-master-bigdata-pro01.kfk.com.out
  bigdata-pro03.kfk.com: starting regionserver, logging to /opt/modules/hbase-0.98.6-cdh5.3.0/bin/../logs/hbase-kfk-regionserver-bigdata-pro03.kfk.com.out
  bigdata-pro02.kfk.com: starting regionserver, logging to /opt/modules/hbase-0.98.6-cdh5.3.0/bin/../logs/hbase-kfk-regionserver-bigdata-pro02.kfk.com.out
  bigdata-pro01.kfk.com: starting regionserver, logging to /opt/modules/hbase-0.98.6-cdh5.3.0/bin/../logs/hbase-kfk-regionserver-bigdata-pro01.kfk.com.out
  [kfk@bigdata-pro01 hbase-0.98.6-cdh5.3.0]$

 

     bigdata-pro01.kfk.com机器的HMaster状态

 技术分享图片

 

 

 

 

 

 

 

 

 

 

     bigdata-pro01.kfk.com机器的HRegion server状态

 技术分享图片

 

 

 

 

 

 

 

 

 

 

 

 

     bigdata-pro02.kfk.com机器的HRegion server状态

技术分享图片

 

 

 

 

 

 

 

 

 

 

     bigdata-pro03.kfk.com机器的HRegion server状态

技术分享图片

 

 

 

 

 

 

 

 

    然后,启动HBase HA。

技术分享图片

[kfk@bigdata-pro02 hbase-0.98.6-cdh5.3.0]$ bin/hbase-daemon.sh start master
starting master, logging to /opt/modules/hbase-0.98.6-cdh5.3.0/bin/../logs/hbase-kfk-master-bigdata-pro02.kfk.com.out
[kfk@bigdata-pro02 hbase-0.98.6-cdh5.3.0]$ jps
3018 NodeManager
2623 QuorumPeerMain
2787 DataNode
4088 Jps
4046 HMaster
2722 NameNode
3685 HRegionServer
2874 JournalNode
[kfk@bigdata-pro02 hbase-0.98.6-cdh5.3.0]$ 

 

 

 

 

 

 

 

技术分享图片

 

 

 

 

 

技术分享图片

 

 

 

 

 

 

 

 

 

 

 

欢迎大家,加入我的微信公众号:大数据躺过的坑        人工智能躺过的坑
 
 
 

同时,大家可以关注我的个人博客

   http://www.cnblogs.com/zlslch/   和     http://www.cnblogs.com/lchzls/      http://www.cnblogs.com/sunnyDream/   

   详情请见:http://www.cnblogs.com/zlslch/p/7473861.html

 

  人生苦短,我愿分享。本公众号将秉持活到老学到老学习无休止的交流分享开源精神,汇聚于互联网和个人学习工作的精华干货知识,一切来于互联网,反馈回互联网。
  目前研究领域:大数据、机器学习、深度学习、人工智能、数据挖掘、数据分析。 语言涉及:Java、Scala、Python、Shell、Linux等 。同时还涉及平常所使用的手机、电脑和互联网上的使用技巧、问题和实用软件。 只要你一直关注和呆在群里,每天必须有收获

 

      对应本平台的讨论和答疑QQ群:大数据和人工智能躺过的坑(总群)(161156071)技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片 

 

技术分享图片

 

 

 

 

 

技术分享图片

 

 

 

 

 

 技术分享图片

 

Apache版本的Hadoop HA集群启动详细步骤【包括Zookeeper、HDFS HA、YARN HA、HBase HA】(图文详解)

标签:str   error   reg   name   pytho   数据挖掘   info   standby   hbase   

原文地址:https://www.cnblogs.com/zlslch/p/9192981.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!