码迷,mamicode.com
首页 > 其他好文 > 详细

hadoop

时间:2020-06-20 00:48:56      阅读:63      评论:0      收藏:0      [点我收藏+]

标签:namenode   开机   emctl   密码   安装   env   访问   tool   root   

1 hadoop 在虚拟机上的安装与配置

下载地址 http://archive.cloudera.com/cdh5/cdh/5/

演示的下载包 http://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.15.1.tar.gz

下载解压

 环境centos7.6

 安装jdk1.8

配置ssh无密码登陆

ssh -keygen -t rsa 一路回车

cd ~/.ssh  有id_rsa ,id_rsa.pub,known_hosts

技术图片

 

 

 cat  id_rsa.pub >> authorized_keys

chomd 600 authorized_keys

vim /etc/hosts

设置 ip  hadoop000

即 技术图片

 

 

 

vim /etc/profile

技术图片

 

 

 

export JAVA_HOME=/usr/local/java/jdk/jdk1.8.0_11/
export JRE_HOME=/usr/local/java/jdk/jdk1.8.0_11//jre
export PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin
export CLASSPATH=$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jar

#hadoop
export HADOOP_HOME=/work/hadoop/hadoop-2.6.0-cdh5.15.1/
export PATH=$PATH:HADOOP_HOME/bin:$HADOOP_HOME/bin

 

vim /work/hadoop/hadoop-2.6.0-cdh5.15.1/etc/hadoop/hdfs-site.xml

mkdir tmp

技术图片

 

 

 

vim /work/hadoop/hadoop-2.6.0-cdh5.15.1/etc/hadoop/core-site.xml

技术图片

 

 

 

<configuration>

<property>
<name>fs.defaultFS</name>
<value>hdfs://hadoop000:8020</value>
</property>
</configuration>

 

vim /work/hadoop/hadoop-2.6.0-cdh5.15.1/etc/hadoop/hadoop-env.sh

技术图片

 

 

vim /work/hadoop/hadoop-2.6.0-cdh5.15.1/etc/hadoop/slaves

技术图片

 

 

/sbin/stop-all.sh #先停止hadoop相关进程

/bin/hdfs namenode -format #重新格式化文件系统,因为之前的文件系统被误删除


firewall-cmd --state 查看防火墙的运行状态
开启/关闭防火墙(重启服务器后又会重新关闭)

[root@localhost HMK]# systemctl start/stop firewalld.service

设置防火墙开机自动启动

[root@localhost HMK]# systemctl enable firewalld.service   

重启防火墙

[root@localhost HMK]# systemctl restart firewalld.service

访问
http://192.168.19.128:50070
 

 

hadoop

标签:namenode   开机   emctl   密码   安装   env   访问   tool   root   

原文地址:https://www.cnblogs.com/shufeiyang/p/13166980.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!