Debian系统配置 我这里在Vmware里面虚拟4个Debian系统,一个master,三个solver。hostname分别是 master、solver1、solver2、solver3 。对了,下面的JDK和hadoop安装配置操作都是使用 hadoop用户权限 来执行,并非root权限。 ...
分类:
其他好文 时间:
2019-08-25 21:40:52
阅读次数:
182
一.环境支持 操作系统: CentOS7 64 JDK环境: JDK 8 Hadoop环境: hadoop-2.8.0 虚拟机名称: master(主)+slave1(从1)+slave2(从2) CentOS7 64位百度网盘下载地址: 链接:https://pan.baidu.com/s/1dc ...
分类:
其他好文 时间:
2019-08-22 18:39:38
阅读次数:
111
在虚拟机安装centos7,要提前安装好jdk环境 工作流程:在ZooKeeper中管理多个Broker节点,根据 Master选举策略让其中一个 Broker选举为Master(只有Master才具备对外提供服务的能力),剩下Broker为slave。编码时,client端(消费者)通过failo ...
分类:
其他好文 时间:
2019-08-21 13:25:46
阅读次数:
83
Ceph 存储集群 - 搭建存储集群 2019年8月1日 16:12 Ceph 存储集群 - 搭建存储集群 目录 一、准备机器 二、ceph节点安装 三、搭建集群 四、扩展集群(扩容) 一、准备机器 本文描述如何在 CentOS 7 下搭建 Ceph 存储集群(STORAGE CLUSTER)。 一 ...
分类:
其他好文 时间:
2019-08-18 13:57:24
阅读次数:
124
一、Zookeeper集群搭建 为保证集群高可用,Zookeeper 集群的节点数最好是奇数,最少有三个节点,所以这里搭建一个三个节点的集群。 1.1 下载 & 解压 下载对应版本 Zookeeper,这里我下载的版本 。官方下载地址:https://archive.apache.org/dist/ ...
分类:
其他好文 时间:
2019-08-18 10:03:51
阅读次数:
80
1.CM(Cloudera Manager)介绍 1.1 简介 Cloudera Manager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具,使得安装集群从几天的时间缩短在几个小时内,运维人员从数十人降低到几人以内,极大的提高集群管理的效率。 对比Apache / CDH / ...
分类:
其他好文 时间:
2019-08-16 22:35:14
阅读次数:
257
1、准备3台机器 node1 node2 node3 2、修改机器配置(3台机器) 修改ip 修改主机名 修改主机名与ip的映射 3、上传zookeeper包到服务器,并解压,修改配置 修改zoo.cfg,如果不存在,就创建 vi zoo.cfg 切换到dataDir目录下创建myid文件,在nod ...
分类:
其他好文 时间:
2019-08-14 22:07:06
阅读次数:
115
CentOS7 haproxy+keepalived实现高可用集群搭建 1.1 本地操作系统环境 CentOS7 64位 [root@lb03 ~]# cat /etc/centos-release CentOS Linux release 7.5.1804 (Core) [root@lb03 ~] ...
分类:
其他好文 时间:
2019-08-14 16:58:56
阅读次数:
73
JDK安装 设置hostname 设置机器hosts 创建jdk目录 上传jdk包 打开winSCP工具,通过winscp工具上传java jdk到linux 的/opt/soft文件夹下 解压jdk 将jdk文件解压到module文件夹下,命令如下: 设置jdk的环境变量 在文件末尾添加jdk的环 ...
分类:
其他好文 时间:
2019-08-10 19:18:29
阅读次数:
131
最近学redis集群搭建,需要安装ruby。用yum安装的版本过低。需要升级。试过离线安装,总是不成功。在安装的时候总是报编译错误. 三天了,也不知道问题出在哪儿。 参考了两篇博文,终于通过rvm成功将ruby升级到了最新版.现记录一下步骤. 一 安装ruby 1 查看系统当前ruby版本,可知未安 ...
分类:
其他好文 时间:
2019-08-05 14:30:21
阅读次数:
605