码迷,mamicode.com
首页 > 其他好文 > 详细

hadoop3.1.1 HA高可用分布式集群安装部署

时间:2019-01-24 00:33:28      阅读:197      评论:0      收藏:0      [点我收藏+]

标签:介绍   chkconfig   port   tar.gz   linux   path   安装   机器   div   

1、环境介绍

  服务器:CentOS 6.8 其中:2 台 namenode、3 台 datanode

  JDK:jdk-8u191-linux-x64.tar.gz

hadoop:hadoop-3.1.1.tar.gz

节点信息:

节点 IP namenode datanode resourcemanager journalnode
namenode1 192.168.67.101  
namenode2 192.168.67.102  
datanode1 192.168.67.103    
datanode2 192.168.67.104    
datanode3 192.168.67.105    

2、配置ssh免密登陆

  2.1 在每台机器上执行 ssh-keygen -t rsa

  2.2 vim ~/.ssh/id_rsa.pub 将所有机器上的公钥内容汇总到 authorized_keys 文件并分发到每台机器上。

  2.3 授权 chmod 600 ~/.ssh/authorized_keys

3、配置hosts: 

vim /etc/hosts

#增加如下配置
192.168.67.101 namenode1
192.168.67.102 namenode2
192.168.67.103 datanode1
192.168.67.104 datanode2
192.168.67.105 datanode3
#将hosts文件分发至其他机器
scp -r /etc/hosts namenode2:/etc/hosts
scp -r /etc/hosts datanode1:/etc/hosts
scp -r /etc/hosts datanode2:/etc/hosts
scp -r /etc/hosts datanode3:/etc/hosts

4、关闭防火墙

service iptables stop
chkconfig iptables off

5、安装JDK

tar -zxvf /usr/local/soft/jdk-8u191-linux-x64.tar.gz -C /usr/local/

vim /etc/profile #增加内容 export JAVA_HOME=/usr/local/jdk1.8.0_191 export JRE_HOME=${JAVA_HOME}/jre export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib export PATH=${JAVA_HOME}/bin:$PATH
生效环境变量:source /etc/profile

 

hadoop3.1.1 HA高可用分布式集群安装部署

标签:介绍   chkconfig   port   tar.gz   linux   path   安装   机器   div   

原文地址:https://www.cnblogs.com/lufan2008/p/10312085.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!