既然是伪分布式，那就不可避免的设计到重启Hadoop服务或者重启Hadoop服务器的情况，正确的停止和重启是很有必要的。 首先是Hadoop服务的停止，使用 ./sbin/stop-all.sh脚本来停止所有的Hadoop服务，这个脚本包含了两个脚本的内容，一个是./sbin/stop-dfs.sh ...
分类：
其他好文 时间：
2018-04-09 11:21:27
阅读次数：
161
hbase下载：点此链接 （P.S.下载带bin的） 下载文件放入虚拟机文件夹，打开，放在自己指定的文件夹 修改环境配置 修改hbase安装目录下的conf/hbase-env.sh文件（这里两个地方要细心找一下，在一堆的注释里面，找到以后把前面 # 删去以后再修改） 修改hbase安装目录下的co ...
分类：
其他好文 时间：
2018-04-07 22:43:25
阅读次数：
200
一、HDFS伪分布式环境搭建Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时，它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。HDFS放宽了一部分POSIX约束，来实
分类：
其他好文 时间：
2018-04-07 12:51:45
阅读次数：
183
操作系统： MAC OS X 一、准备 下载地址：http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html 下载地址：https://archive.cloudera.com/cdh5/cd ...
分类：
系统相关 时间：
2018-04-05 20:56:11
阅读次数：
302
分布式环境搭建之环境介绍之前我们已经介绍了如何在单机上搭建伪分布式的Hadoop环境，而在实际情况中，肯定都是多机器多节点的分布式集群环境，所以本文将简单介绍一下如何在多台机器上搭建Hadoop的分布式环境。我这里准备了三台机器，IP地址如下：192.168.77.128192.168.77.130192.168.77.134首先在这三台机器上编辑/etc/hosts配置文件，修改主机名以及配置其
分类：
其他好文 时间：
2018-04-02 22:04:25
阅读次数：
244
大数据解决四大核心问题： 数据的存储（Big Data Storage），海量数据需要处理和分析，但前提是要进行有效的存储。Hadoop的诞生突破了传统数据文件系统的单机模式。HDFS使得数据可以跨越不同的机器与设备，并且用一个路径去管理不同平台上的数据。 数据的计算（Data Calculatio ...
分类：
其他好文 时间：
2018-04-01 21:53:56
阅读次数：
140
1. 软硬件环境 CentOS 7.2 64 位 OpenJDK- 1.8 Hadoop- 2.7 2. 安装SSH客户端 安装SSH 安装SSH： 安装完成后，可以使用下面命令进行测试： 输入 root 账户的密码，如果可以正常登录，则说明SSH安装没有问题。 3.安装java环境 安装 JDK ...
分类：
其他好文 时间：
2018-03-31 00:38:34
阅读次数：
368
