标签:hadoop
1. 配置主机的名称
master,slave1,slave2
2. 安装JDK:
3. 配置IP与主机名称的映射:
192.168.0.100 master
192.168.0.101 slave1
192.168.0.103 slave2
4. 配置ssh免密码登陆:
Ssh-keygen –t rsa
5. 解压hadoop的安装文件
6. 修改hadoop-env.sh, core-site.xml, hdfs-site.xml, mapred-site.xml
7. 格式化分布式文件系统:
[hadoop@master hadoop-1.2.1]$bin/hadoop namenode -format
8. 启动守护进程:
[hadoop@master hadoop-1.2.1]$bin/start-all.sh
9. 检测守护进程的启动情况:
[hadoop@master hadoop-1.2.1]$/data/java/jdk1.6.0_13/bin/jps
master:
Slave1:
Slave2:
该命令也可以查看:
[hadoop@master hadoop-1.2.1]$ bin/hadoopdfsadmin -report
http://192.168.0.100:50070/dfshealth.jsp
http://192.168.0.100:50030/jobtracker.jsp
10. 问题:
A.主节点没有NameNode:需要重新格式化,格式化前必须删除相关tmp文件;
B.从节点的DataNode无法启动,需要查看cat /data/hadoop/hadoop-1.2.1/logs 中的日志,查明无法启动的原因,
WARNorg.apache.hadoop.hdfs.server.datanode.DataNode: Invalid directory indfs.data.dir: Incorrect permission for /data /hadoop/data, expected: rwxr-xr-x,while actual: rwxrwxr-x 该问题的解决方法是chmod 755 /data /hadoop/data;
参考连接:http://www.cnblogs.com/Cilimer/p/3764579.html
有问题百度还是比较靠谱的,能学到好多东西!!!
标签:hadoop
原文地址:http://blog.csdn.net/u012625036/article/details/28421375