hadoop搭建

标签：for   cal   local   default   java安装   nod   XML   copy   ubuntu   

hadoop版本：2.7.4

java版本:1.8.0

os: ubuntu16.04 server

安装：

1.安装java。

2.下载haddop-2.7.4-bin.tar.gz, 解压，如图

hadoop的配置文件位于 hadoop安装目录下的 etc/hadoop下

通用配置

1.JAVA_HOME

修改hadoop-env.sh, 设置JAVA_HOME=java安装路径

2.HADOOP_HOME

修改/etc/profile， 设置HADOOP_HOME=HADOOP根目录, source /etc/profile

=========================================================

1.单机模式

2.伪分布式模式

 1)etc/hadoop/core-site.xml     

<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:9000</value>
    </property>
</configuration>

2) etc/hadoop/hdfs-site.html

<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
</configuration>

3)ssh免密码登录
ssh-keygen -t rsa
ssh-copy-id -i ~/.ssh/id_rsa.pub localhost
4)
格式化文件系统   hdfs namenode -format
启动 haddop    ./sbin/start-all.sh

查看 hadoop是不是以分布式的方式启动了 jps

可以看到hadoop有多个进程，而不是在一个进程中。

hadoop搭建

标签：for   cal   local   default   java安装   nod   XML   copy   ubuntu   

原文地址：http://www.cnblogs.com/lowseasonwind/p/7526995.html