上一篇blog我们完成了Hadoop伪分布式环境的搭建,伪分布式模式也叫单节点集群模式, NameNode、SecondaryNameNode、DataNode、JobTracker、TaskTracker所有的守护进程全部运行在K-Master节点之上。在本篇blog我们将搭建完全分布式环境,运行 ...
分类:
其他好文 时间:
2018-07-07 13:50:03
阅读次数:
223
在这篇blog中,我们将介绍Hbase的单机模式安装与伪分布式的安装方式,以及通过浏览器查看Hbase的用户界面。搭建hbase伪分布式环境的前提是我们已经搭建好了hadoop完全分布式环境,搭建hadoop环境请参考:【Hadoop基础教程】4、Hadoop之完全分布式环境搭建 开发环境 硬件环境 ...
分类:
其他好文 时间:
2018-07-07 13:39:34
阅读次数:
186
环境介绍 服务器软件版本 操作系统 CentOS 6.5 x86_64 Java 1.7.0_79 hadoop 2.6.1 hadoop各个节点集群架构 主机名 ip 角色 hadoop01 192.168.103.137 ResourceManager/NameNode/SecondaryNam ...
分类:
其他好文 时间:
2018-07-07 12:39:18
阅读次数:
191
一、安装HBase: 我这里选择的是hbase-1.3.1-bin.tar.gz版本解压HBase: 配置HBase的环境变量: 生效环境变量: 二、HBase的安装模式: 1、本地模式: 修改两个配置文件: 2、伪分布式模式: 特点:具备HBase的所有功能 修改两个配置文件: 添加java环境变 ...
分类:
其他好文 时间:
2018-07-05 16:04:24
阅读次数:
153
Overview:过程有很多帖子都解释了如何搭建,本文主要列举需要做的事情,然后在文末提供一个非常详细的搭建教程,方便大家使用。 我这里是使用了3台服务器搭建分布式平台,每台机子都需要配置java的开发环境,hadoop的四个XML文件,host名称和profile配置文件,特别需要注意的是mast ...
分类:
其他好文 时间:
2018-07-04 19:33:50
阅读次数:
127
Linux上安装Hadoop集群(CentOS7+hadoop-2.8.0) https://blog.csdn.net/pucao_cug/article/details/71698903 Centos7完全分布式搭建Hadoop2.7.3 https://www.cnblogs.com/ksWo ...
分类:
系统相关 时间:
2018-06-30 10:58:51
阅读次数:
186
部署hbase全分布式时,出现以下错误:主机的hbase启动了,但是从机的没启动[root@centos7-01 my.shells]# start-hbase.sh Java HotSpot(TM) 64-Bit Server VM warning: Using incremental CMS i... ...
分类:
其他好文 时间:
2018-06-29 15:05:45
阅读次数:
195
Hadoop集群搭建(完全分布式) 这里设置了NameNode的地址,是在ruixuan.com这台主机上,设置hadoop的临时目录,自己指定。 replication的是副本数,意思是一个文件需要在HDFS分布式文件系统中保存几分,建议 DataNode的数量应大于等于replication。 ...
分类:
其他好文 时间:
2018-06-20 12:50:56
阅读次数:
179
Hadoop集群完全分布式配置部署 下面的部署步骤,除非说明是在哪个服务器上操作,否则默认为在所有服务器上都要操作。为了方便,使用root用户。 1.准备工作 1.1 centOS6服务器3台 手动指定3服务器台以下信息: hostname IP mask gateway DNS 备注 master ...
分类:
其他好文 时间:
2018-06-20 00:54:11
阅读次数:
249