码迷,mamicode.com
首页 > 其他好文 > 详细

hadoop1.X安装

时间:2014-06-07 14:57:07      阅读:195      评论:0      收藏:0      [点我收藏+]

标签:hadoop

1.      配置主机的名称

master,slave1,slave2

2.      安装JDK:

3.      配置IP与主机名称的映射:

192.168.0.100 master

192.168.0.101 slave1

192.168.0.103 slave2

4.      配置ssh免密码登陆:

Ssh-keygen –t rsa

5.      解压hadoop的安装文件

6.      修改hadoop-env.sh, core-site.xml, hdfs-site.xml, mapred-site.xml

7.      格式化分布式文件系统:

[hadoop@master hadoop-1.2.1]$bin/hadoop namenode -format

bubuko.com,布布扣

8.      启动守护进程:

[hadoop@master hadoop-1.2.1]$bin/start-all.sh

bubuko.com,布布扣

9.      检测守护进程的启动情况:

[hadoop@master hadoop-1.2.1]$/data/java/jdk1.6.0_13/bin/jps

master:

bubuko.com,布布扣

Slave1:

bubuko.com,布布扣

Slave2:

bubuko.com,布布扣

该命令也可以查看:

[hadoop@master hadoop-1.2.1]$ bin/hadoopdfsadmin -report

bubuko.com,布布扣

http://192.168.0.100:50070/dfshealth.jsp

bubuko.com,布布扣

http://192.168.0.100:50030/jobtracker.jsp

bubuko.com,布布扣

10.   问题:

A.主节点没有NameNode:需要重新格式化,格式化前必须删除相关tmp文件;

B.从节点的DataNode无法启动,需要查看cat /data/hadoop/hadoop-1.2.1/logs 中的日志,查明无法启动的原因,

WARNorg.apache.hadoop.hdfs.server.datanode.DataNode: Invalid directory indfs.data.dir: Incorrect permission for /data /hadoop/data, expected: rwxr-xr-x,while actual: rwxrwxr-x 该问题的解决方法是chmod 755  /data /hadoop/data

参考连接:http://www.cnblogs.com/Cilimer/p/3764579.html

有问题百度还是比较靠谱的,能学到好多东西!!!

hadoop1.X安装,布布扣,bubuko.com

hadoop1.X安装

标签:hadoop

原文地址:http://blog.csdn.net/u012625036/article/details/28421375

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!