码迷,mamicode.com
首页 > 其他好文 > 详细

独立模式的Hadoop环境搭建

时间:2016-04-13 00:43:24      阅读:143      评论:0      收藏:0      [点我收藏+]

标签:运行环境   软件包   操作系统   java   程序   

    对于Hadoop来说,最主要的是两个方面,一个是分布式文件系统HDFS,另一个是MapReduce计算模型,搭建Hadoop的运行环境主要分为三种:独立模式环境、伪分布式环境、完全分布式环境。
    一、独立模式:也叫单机模式。这种模式在一台单机上运行,没有分布式文件系统,而是直接读写本地操作系统的文件系统,没有守护进程,所有程序都运行在同一个JVM中,利于调试和测试,主要用于开发环境。
    二、伪分布式:hadoop运行在单机上,但是模拟了一个小的集群,运行在不同的JVM中,用不同的Java进程模仿分布式运行中的各类结点。
(NameNode,DataNode,JobTracker,TaskTracker,SecondaryNameNode)
    三、完全分布式:hadoop运行在不同的主机上,也就是运行在一个主机的集群上面,实现了真正的分布式。


    下面我分享一下在centOS6.7上搭建独立模式Hadoop 环境的过程(本人亲测有效),另外两种模式的搭建后面逐步更新。
    第一步:安装rzsz命令
       技术分享

 
    第二步:创建存放软件包目录
        技术分享

 
    第三步:上传linux版本jdk软件包
        技术分享

    第四步:安装jdk
       技术分享

 
    第五步:配置java的环境变量
       技术分享

       技术分享

       技术分享

 
    第六步:上传Hadoop安装软件包
       技术分享

 
 
    第七步:解压hadoop安装软件并将目录移动到程序目录下
       技术分享

       技术分享

 
    第八步:配置hadoop环境变量
       技术分享

 
    第九步:检测是否成功
       技术分享

    如果你看到这个效果,证明你的hadoop已经安装成功。

独立模式的Hadoop环境搭建

标签:运行环境   软件包   操作系统   java   程序   

原文地址:http://jaydenwang.blog.51cto.com/6033165/1763085

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!