Hadoop学习笔记一

标签：hadoop

第一个hands-on入门程序：

参考  http://blog.csdn.net/sim_szm/article/details/12578055   搭建环境并跑WordCount程序，区别是我安装的是最新的hadoop版本0.23.11，JDK我使用的是Sun JDK，Linux使用的是国产的Kylin。

问题一：Error: JAVA_HOME is not set and could not be found.

解决方案：

1. /etc/profile 文件中export JAVA_HOME

2. ${HADOOP_HOME}/libexec/hadoop-config.sh 显式export JAVA_HOME

3. ${HADOOP_HOME}/etc/hadoop/yarn-env.sh 显式export JAVA_HOME

问题二：NameNode 没有启动

解决方案：

1. 删除core-site.xml文件中配置的tmp目录

2. 运行  hadoop namenode -format  命令

3. 再运行sbin目录下的start-dfs.sh脚步启动NameNode和datanode

问题三：为何需要SSH

解决方案：Hadoop集群成员的通讯机制都是使用SSH，即使是单机环境，内部脚本也会运行 ssh localhost进行处理，所以安装SSH是必须的。

本文出自 “力量来源于赤诚的爱！” 博客，请务必保留此出处http://stevex.blog.51cto.com/4300375/1535193

Hadoop学习笔记一,布布扣,bubuko.com

Hadoop学习笔记一

标签：hadoop

原文地址：http://stevex.blog.51cto.com/4300375/1535193