一、Hadoop的安装模式有3种 ①单机模式:不能使用HDFS,只能使用MapReduce,所以单击模式主要用于测试MR程序。 ②伪分布式模式:用多个线程模拟真实多台服务器,即模拟真实的完全分布式环境。 ③完全分布式模式:用多台机器(或启动多个虚拟机)来完成部署集群。 二、安装主要涉及以下内容: ① ...
分类:
其他好文 时间:
2019-07-25 00:07:47
阅读次数:
137
因为HBase需要Zookeeper的支持,需要在启动HBase之前先启动Zookeeper(zookeeper安装) 1. 安装HBase(伪分布式版) 部署架构: 在master机器上解压缩hbase-1.2.4-bin.tar.gz 进入hbase-1.2.4目录 HBase的主目录由如下结构 ...
分类:
其他好文 时间:
2019-07-23 13:22:23
阅读次数:
90
1、本地模式:默认模式 - 不对配置文件进行修改。 - 使用本地文件系统,而不是分布式文件系统。 - Hadoop不会启动NameNode、DataNode、ResourceManager、NodeManager等守护进程,Map()和Reduce()任务作为同一个进程的不同部分来执行的。 - 用于 ...
分类:
其他好文 时间:
2019-07-19 14:03:28
阅读次数:
142
学习大数据首先要了解大数据的学习路线,首先搞清楚先学什么,再学什么,大的学习框架知道了,剩下的就是一步一个脚印踏踏实实从最基础的开始学起。
分类:
其他好文 时间:
2019-07-14 23:57:19
阅读次数:
220
redis5 官网下载地址:https://redis.io/download redis5-Linux安装:https://blog.csdn.net/qq_39135287/article/details/83474865 redis 集群搭建官网文档:https://redis.io/topi ...
分类:
系统相关 时间:
2019-07-10 18:39:42
阅读次数:
159
前言 本文基于伪分布式搭建 hadoop+zookeeper+hbase+opentsdb之后,文章链接:https://www.cnblogs.com/yybrhr/p/11128149.html,对于Hbase数据备份和恢复的几种方法已经有很多大神说明了很多(https://www.cnblog ...
分类:
数据库 时间:
2019-07-10 18:36:04
阅读次数:
522
一、前期准备 1、配置ip 进入文件编辑模式: 原内容: 修改后内容: 重启网络使之生效 用CRT进行登录 2、修改hostname 3、映射hostname 添加红框栏: 4、联网 方便yum下载安装包或者安装一些命令,就必须联网: 5、安装vim 6、下载准备安装包 我在/opt/soft分别准 ...
分类:
数据库 时间:
2019-07-03 18:22:58
阅读次数:
177
关于伪分布式的配置全程 1.安装VMWare WorkStation,直接下一步,输入激活码即可安装 2.安装Linux(需要100GB) 引导分区Boot200MB 交换分区Swap2048MB 其余分配到/ 3.配置网络服务 注意点: 1.关于IPADDR的前三个网关,要与虚拟网络编辑器的VMn ...
分类:
其他好文 时间:
2019-06-23 01:11:37
阅读次数:
118
HBase安装配置 HBase的安装有三种模式:单机模式、伪分布式模式、分布式模式。 其中,HBase在单机模式下不使用HSFS,直接将安装文件解压,改个hbase.xml文件就可以运行了;默认情况下HBAse数据是存储在根目录的tmp文件夹下,可以通过start-hbase.sh和stop-hba ...
分类:
其他好文 时间:
2019-06-16 15:58:41
阅读次数:
115
修改hosts 创建用户 sudo授权 切换用户 下载解压 创建工作目录 添加环境变量 hadoop/ 修改配置文件 格式化hdfs 启动hdfs/ Yarn 查看启动状态 浏览器查看 [http://mo.don.com:9870]: [http://mo.don.com:8088]: ...
分类:
其他好文 时间:
2019-06-14 12:41:55
阅读次数:
88