码迷,mamicode.com
首页 > 其他好文 > 详细

Hadoop2.6.0伪分布环境搭建

时间:2015-01-21 09:02:43      阅读:207      评论:0      收藏:0      [点我收藏+]

标签:hadoop2.6.0伪分布环境搭建

 

Hadoop2.6.0伪分布环境搭建

用到的软件:

技术分享

一、安装jdk

1、要安装的jdk,我把它拷在了共享文件夹里面。

  (用优盘拷也可以)

技术分享

2、我把jdk拷在了用户文件夹下面。

(其他地方也可以,不过路径要相应改变)

技术分享

3、执行复制安装解压命令:

技术分享

 解压完毕:

 技术分享

查看解压的文件夹:

技术分享

4、配置 环境变量:

技术分享

写入如下5行代码:

技术分享

使配置生效:

技术分享

5、查看安装的jdk

java -version

技术分享

java

技术分享

javac

 技术分享

 

二、SSH免密码登陆:

1、安装SSH

技术分享

2、是否生成 .ssh 目录:

 技术分享

3、如果没有生成,自己手动创建一个 .ssh  目录:

 技术分享

生成的 .ssh 目录:

技术分享

 

4、生成公钥与私钥:

技术分享

效果如下:

 技术分享

5、将公钥加入到用于认证的公钥文件中:

 技术分享

6、免密码登陆:

技术分享

效果:

 技术分享

 

 

Ubuntu 免密码登陆,SSH配置完。

 

三、安装配置Hadoop

 

1、复制安装解压Hadoop

 技术分享

解压完毕效果:

 技术分享

2、配置 etc/profile

 技术分享

技术分享

 

技术分享

 

3、配置 hadoop-env.sh

进入

 技术分享


技术分享


技术分享

4、修改hadoop-2.6.0文件权限为用户权限:

技术分享

默认没有mapred-site.xml文件,复制mapred-site.xml.template一份,并把名字改为mapred-site.xml

技术分享

5、配置下面4个重要文件:

mapred-site.xml

 技术分享

 技术分享

core-site.xml

技术分享

 

 技术分享

hdfs-site.xml

 技术分享

 技术分享

yarn-site.xml

 技术分享

 技术分享

6、格式化:

技术分享

格式化部分效果:

技术分享

7、启动:

先启动  start-dfs.sh

技术分享

效果:

技术分享

再启动  start-yarn.sh

技术分享

效果:

技术分享

关闭hadoop:

 技术分享

 

 

(注:也可以  sbin/start-all.sh:  建议分开启动。)效果一样,如下:

 技术分享

8、查看Web页面信息:

 技术分享

 

 

 技术分享

 

至此,hadoop-2.6.0伪分布配置成功。

 

Hadoop2.6.0伪分布环境搭建

标签:hadoop2.6.0伪分布环境搭建

原文地址:http://blog.csdn.net/baolibin528/article/details/42939477

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!