进行Hadoop伪分布式搭建时，需要有一定的Linux命令基础, 因为Hadoop是搭建在Linux环境上的开源框架, Hadoop的框架最核心的设计就是：HDFS和MapReduce。 本文也主要讲述HDFS和MapReduce环境的搭建。 搭建环境： 一、虚拟机网络环境配置 1.首先移动到网络配 ...
分类：
其他好文 时间：
2018-07-19 21:20:24
阅读次数：
152
一、Spark支持的安装模式： 1、伪分布式（一台机器即可） 2、全分布式（至少需要3台机器） 二、Spark的安装配置 1、准备工作 安装Linux和JDK1.8 配置Linux：关闭防火墙、主机名、免密码登陆 2、安装部署Spark 解压：tar z-xvf spark-2.1.0-bin-ha ...
分类：
其他好文 时间：
2018-07-15 13:50:23
阅读次数：
143
配置zookeeper 下载zookeeper tar包 解压：tar -zxvf zookeeper-3.4.10.tar.gz -C /root/training/ 配置 cd /root/training/zookeeper-3.4.10/conf mv zoo_sample.cfg zoo. ...
分类：
其他好文 时间：
2018-07-14 00:49:30
阅读次数：
264
1.先下载hadoop包，这里使用hadoop-2.7.3.tar.gz 2.配置hadoop环境变量：修改/etc/profile文件 ：vi /etc/profile HADOOP_HOME=/soft/hadoop PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOM ...
分类：
其他好文 时间：
2018-07-13 17:41:38
阅读次数：
171
https://my.oschina.net/MyHeaven1987/blog/1821509 http://hadoop.apache.org/docs/current/hadoop-project-dist/hadoop-common/SingleCluster.html#Pseudo-Dis ...
分类：
其他好文 时间：
2018-07-13 17:38:57
阅读次数：
191
首先需要保证hadoop已经在电脑上安装。然后接下来只需要下载hhase配置就行了。 Step1: 下载hbase http://archive.apache.org/dist/hbase/1.2.6/ 选择hbase-1.2.6-bin.tar.gz Step2: 解压hbase到指定目录 Ste ...
分类：
系统相关 时间：
2018-07-08 13:31:47
阅读次数：
272
上一篇blog我们完成了Hadoop伪分布式环境的搭建，伪分布式模式也叫单节点集群模式， NameNode、SecondaryNameNode、DataNode、JobTracker、TaskTracker所有的守护进程全部运行在K-Master节点之上。在本篇blog我们将搭建完全分布式环境，运行 ...
分类：
其他好文 时间：
2018-07-07 13:50:03
阅读次数：
223
在这篇blog中，我们将介绍Hbase的单机模式安装与伪分布式的安装方式，以及通过浏览器查看Hbase的用户界面。搭建hbase伪分布式环境的前提是我们已经搭建好了hadoop完全分布式环境，搭建hadoop环境请参考：【Hadoop基础教程】4、Hadoop之完全分布式环境搭建 开发环境 硬件环境 ...
分类：
其他好文 时间：
2018-07-07 13:39:34
阅读次数：
186
一、安装HBase： 我这里选择的是hbase-1.3.1-bin.tar.gz版本解压HBase： 配置HBase的环境变量: 生效环境变量： 二、HBase的安装模式： 1、本地模式： 修改两个配置文件： 2、伪分布式模式： 特点：具备HBase的所有功能 修改两个配置文件： 添加java环境变 ...
分类：
其他好文 时间：
2018-07-05 16:04:24
阅读次数：
153
JDK安装配置 1 执行 rpm -i jdk-8u91-linux-x64.rpm 默认安装在/usr/java/jdk1.8.0_91目录中 2 3 配置环境变量 4 vi /etc/profile 5 在最后一行添加 6 export JAVA_HOME=/usr/java/jdk1.8.0_... ...
分类：
其他好文 时间：
2018-07-04 10:39:30
阅读次数：
180
