公司要将监控数据存入opentsdb,而opentsdb使用了hbase作为存储。所以想搭建一套高可用的分布式存储来供opentsdb使用。 因为机器有限,所以测试过程中将三台集群的环境安装在docker上。 一:宿主机版本和docker版本 宿主机:Centos7.2 3.10.0-862.14. ...
分类:
其他好文 时间:
2019-01-02 19:27:50
阅读次数:
225
分布式集群搭建:http://blog.51cto.com/14048416/2327802?上面试spark普通的分布式集群搭建,存在master节点的单点故障问题。Hadoop2.x开始,已经使用zookeeper解决了单点故障。同样的策略,spark也利用了zookeeper解决了spark集群的单点故障问题。1.集群的规划(这里使用3台机器测试)2.具体搭建步骤:①如果已经使用,
分类:
其他好文 时间:
2019-01-02 12:28:31
阅读次数:
232
一.Redis基本认知 1.含义: REmote DIctionary Server(Redis) | 是一个key-value存储系统 2.特性: 2.1 持久化:可以将内存中的数据保存在磁盘中,重启的时候可以再次加载进行使用; 2.2 支持丰富的数据类型,如:Strings, Lists, Ha ...
分类:
Web程序 时间:
2019-01-01 17:14:45
阅读次数:
614
1.kafka的HA(1)zookeeper在kafka中的作用: -Zookeeper帮助kafka集群运行:存储一些元数据,还会帮助kafka集群进行管理(选主) -存储关于消费者消费了哪些topic到那个进度的数据。 (2)kafkaHA解决的问题: 存在的问题:kafka在0.8以前的版本中,并不提供highava
分类:
其他好文 时间:
2018-12-30 23:24:12
阅读次数:
321
需要开启FEDERATED存储引擎SHOWVARIABLESLIKE‘%plugin%‘没有的话需要现下载放到文件夹下然后installpluginFEDERATEDsoname‘ha_federated.so‘;SHOWENGINES;CREATETABLEggss(idint(11)NOTNULLAUTO_INCREMENT,wfidvarchar(10)DEF
分类:
数据库 时间:
2018-12-28 16:41:24
阅读次数:
191
一 Heartbeat简介 1.1 概述 Heartbeat是Linux-HA项目中的一个组件,也是当前开源HA项目中最成功的一个例子,它提供了所有HA软件所需要的基本功能,如心跳检测和资源接管、监测群集中的系统服务、在群集中的节点间转移共享IP地址的所有者等。heartbeat最核心的功能包括两个 ...
分类:
其他好文 时间:
2018-12-27 22:59:11
阅读次数:
213
一、MYSQL索引类型(共三种) 1)、normal 正常 应用场景:普通的index 2)、unique 唯一性的 应用场景:比如身份证的 3)、full text 全文索引 应用场景:较长文字 二、MYSQL 索引办法(共2种) 1)、btree方法 使用范围:查询指定【范围】的数据 2)、ha ...
分类:
数据库 时间:
2018-12-25 11:22:25
阅读次数:
162
Test examples 样例来源: https://learning.getpostman.com/docs/postman/scripts/test_examples/ Test scripts are run after a request is sent and a response ha ...
分类:
其他好文 时间:
2018-12-21 13:11:08
阅读次数:
756
前言因生产环境需要,现需要搭建一个前端为Nginx的HA双向互备、后端为Nginx代理的loadbalance负载均衡集群。nginx进程基于于Master+Slave(worker)多进程模型,自身具有非常稳定的子进程管理功能。在Master进程分配模式下,Master进程永远不进行业务处理,只是进行任务分发,从而达到Master进程的存活高可靠性,Slave(worker)进程所有的业务信号都
分类:
其他好文 时间:
2018-12-20 01:05:41
阅读次数:
208