注意：此次搭建是在ssh无密码配置、jdk环境已经配置好的情况下进行的 可以参考： Hadoop完全分布式安装教程 CentOS环境下搭建hadoop伪分布式集群 1.更改主机名 执行命令：vi /etc/sysconfig/network 2.设置hosts中ip与主机名的绑定 执行命令 vi / ...
分类：
其他好文 时间：
2018-07-22 17:01:44
阅读次数：
218
软件版本 Hadoop版本号：hadoop-2.6.0-cdh5.7.0； VMWare版本号：VMware 9或10 Linux系统：CentOS 6.4-6.5 或Ubuntu版本号：ubuntu-14.04.1-desktop-i386 Jdk版本号：Jdk1.7.0._79 后三项对版本要求... ...
分类：
其他好文 时间：
2018-07-22 15:19:52
阅读次数：
233
一、Spark支持的安装模式： 1、伪分布式（一台机器即可） 2、全分布式（至少需要3台机器） 二、Spark的安装配置 1、准备工作 安装Linux和JDK1.8 配置Linux：关闭防火墙、主机名、免密码登陆 2、安装部署Spark 解压：tar z-xvf spark-2.1.0-bin-ha ...
分类：
其他好文 时间：
2018-07-15 13:50:23
阅读次数：
143
上一篇blog我们完成了Hadoop伪分布式环境的搭建，伪分布式模式也叫单节点集群模式， NameNode、SecondaryNameNode、DataNode、JobTracker、TaskTracker所有的守护进程全部运行在K-Master节点之上。在本篇blog我们将搭建完全分布式环境，运行 ...
分类：
其他好文 时间：
2018-07-07 13:50:03
阅读次数：
223
在这篇blog中，我们将介绍Hbase的单机模式安装与伪分布式的安装方式，以及通过浏览器查看Hbase的用户界面。搭建hbase伪分布式环境的前提是我们已经搭建好了hadoop完全分布式环境，搭建hadoop环境请参考：【Hadoop基础教程】4、Hadoop之完全分布式环境搭建 开发环境 硬件环境 ...
分类：
其他好文 时间：
2018-07-07 13:39:34
阅读次数：
186
环境介绍 服务器软件版本 操作系统 CentOS 6.5 x86_64 Java 1.7.0_79 hadoop 2.6.1 hadoop各个节点集群架构 主机名 ip 角色 hadoop01 192.168.103.137 ResourceManager/NameNode/SecondaryNam ...
分类：
其他好文 时间：
2018-07-07 12:39:18
阅读次数：
191
一、安装HBase： 我这里选择的是hbase-1.3.1-bin.tar.gz版本解压HBase： 配置HBase的环境变量: 生效环境变量： 二、HBase的安装模式： 1、本地模式： 修改两个配置文件： 2、伪分布式模式： 特点：具备HBase的所有功能 修改两个配置文件： 添加java环境变 ...
分类：
其他好文 时间：
2018-07-05 16:04:24
阅读次数：
153
Overview：过程有很多帖子都解释了如何搭建，本文主要列举需要做的事情，然后在文末提供一个非常详细的搭建教程，方便大家使用。 我这里是使用了3台服务器搭建分布式平台，每台机子都需要配置java的开发环境，hadoop的四个XML文件，host名称和profile配置文件，特别需要注意的是mast ...
分类：
其他好文 时间：
2018-07-04 19:33:50
阅读次数：
127
Linux上安装Hadoop集群(CentOS7+hadoop-2.8.0) https://blog.csdn.net/pucao_cug/article/details/71698903 Centos7完全分布式搭建Hadoop2.7.3 https://www.cnblogs.com/ksWo ...
分类：
系统相关 时间：
2018-06-30 10:58:51
阅读次数：
186
部署hbase全分布式时，出现以下错误：主机的hbase启动了，但是从机的没启动[root@centos7-01 my.shells]# start-hbase.sh Java HotSpot(TM) 64-Bit Server VM warning: Using incremental CMS i... ...
分类：
其他好文 时间：
2018-06-29 15:05:45
阅读次数：
195
