集群:两个或两个以上的服务器组建而成 数据库集群-->读写功能 管理集群-->管理、故障恢复等功能 主节点,在一个分布式集群中负责对其他节点的协调和管理。主节点的存在,就可以保证其他节点的有序运行,以及数据库集群中的写入数据在每个节点上的一致性 分布式选举算法:基于序号选举的算法(比如Bully算法 ...
分类:
其他好文 时间:
2020-04-17 09:31:59
阅读次数:
58
分布式系统理论 - 从放弃到入门随承载用户数量的增加和容灾的需要,越来越多互联网后台系统从单机模式切换到分布式集群。回顾自己毕业五年来的工作内容,同样有这样的转变。 毕业头两年负责维护运行在刀片机上的业务,在机房里拔插单板的日子是我逝去的青春。设备之间通过VCS组成冷备,但即使有双机软件保护,宕机、 ...
分类:
其他好文 时间:
2020-04-15 09:20:46
阅读次数:
216
之前安装GaussDBT1.0.2分布式集群的时候,安装过程中会报segmentationfault错误,如下:[omm@hwd01~]$gs_install-X/mnt/Huawei/db/clusterconfig.xmlParsingtheconfigurationfile.Checkpreinstalloneverynode.Successfullycheckedpreinstallone
分类:
数据库 时间:
2020-04-10 21:15:40
阅读次数:
121
日志是每个系统最为头疼的地方,杂乱,还多,没有还不行,想管理好的话,得经得起考验,要解决的问题总结如下: (1)高并发 (2)高吞吐量 (3)支持分布式集群 (4)检索要快 简介: 1.Zoomkeeper Kafka的通道 2. Kafka Kafka主要是解决大量日志的处理的分布式发布订阅消息系 ...
分类:
Web程序 时间:
2020-04-08 12:05:55
阅读次数:
124
本文用四节点部署GaussDBT1.0.1分布式集群,部署完成后再将其升级到1.0.2版本(直接安装1.0.2版本,在安装过程中会遇到segmentfault报错,目前尚未解决)。前期操作系统准备工作参考之前的几篇文章。1、部署分布式集群1.1节点信息各节点信息如下表所示:1.2集群参数文件根据实际情况修改集群参数,或者通过databasemanager工具生成,内容如下:[root@onasdb
分类:
数据库 时间:
2020-04-07 20:56:31
阅读次数:
124
有时候,利用数据库本身的一些特性,可以解决相当多的问题,Java里常常说分布式、集群,实际上针对这些问题,数据库本身也有一套完整的解决方案,并不一定非要通过代码解决。 在我们开发过程中,难免会产生这样一个需求:需要同时连接A、B、C三个数据库。 这时候,可是视情况,看看是否使用FEDERATED存储 ...
分类:
数据库 时间:
2020-04-05 18:10:53
阅读次数:
127
本文始发于个人公众号: TechFlow ,原创不易,求个关注 今天是分布式专题的第11篇文章,我们一起来聊聊分布式集群资源管理。 在开始文章之前,我们先来问一个问题,为什么是国际上是亚马逊,国内是阿里这两家公司云计算搞得最好呢?这两家公司之间有一个巨大的共同点,就是它们都是电商公司。电商公司的特点 ...
分类:
其他好文 时间:
2020-04-04 09:28:18
阅读次数:
75
kubernetes的安全标签(空格分隔):kubernetes系列一:kubernetes的安全机制二:kubernetes的权限下发devuser三:kubernetes的准入控制##一:kubernetes的安全机制1.1kubernetes的apiserverKubernetes作为一个分布式集群的管理工具,保证集群的安全性是其一个重要的任务。APIServer是集群内部各个组件通信的中介
分类:
Web程序 时间:
2020-03-31 14:19:44
阅读次数:
68
原创itcats_cn 最后发布于2018-09-05 21:07:27 阅读数 5135 收藏展开实现redis高可用机制的一些方法:保证redis高可用机制需要redis主从复制、redis持久化机制、哨兵机制、keepalived等的支持。 主从复制的作用:数据备份、读写分离、分布式集群、实现 ...
分类:
其他好文 时间:
2020-03-26 19:53:12
阅读次数:
84
大数据开发总体架构: Hadoop是大数据开发所使用的一个核心框架。使用Hadoop可以方便的管理分布式集群,将海量数据分布式的存储在集群中,并使用分布式并行程序来处理这些数据。 Hadoop由许多子系统组成,如下图: Hadoop1.x与2.x的对比: YARN:管理集群资源(内存、CPU) ...
分类:
其他好文 时间:
2020-03-17 19:30:09
阅读次数:
49