从性能优先的角度简单对bulk的设计作了一些补充,并对文档查询,写操作的原理过程,一致性级别,quorum的计算做了一些简单讲解
分类:
其他好文 时间:
2020-04-19 09:17:22
阅读次数:
64
单节点NameNode存在问题: NameNode宕机,metadata数据消失; 单节点出现故障,如何进行故障转移? 如果增加一个NameNode节点,会出现脑裂问题(一个集群有多个管理者),如何解决? ZK搭建高可用(HA High Aliavble)HDFS集群 原理 QJM(Quorum J ...
分类:
其他好文 时间:
2020-04-17 20:34:00
阅读次数:
99
[root@bs-k8s-ceph ~]# ceph -s cluster: id: 11880418-1a9a-4b55-a353-4b141e2199d8 health: HEALTH_OK services: mon: 3 daemons, quorum bs-hk-hk01,bs-hk-hk ...
分类:
Web程序 时间:
2020-02-20 17:26:42
阅读次数:
99
1. 基本原理 2.x版本中,HDFS架构解决了单点故障问题,即引入双NameNode架构,同时借助共享存储系统来进行元数据的同步,共享存储系统类型一般有几类,如:Shared NAS+NFS、BookKeeper、BackupNode 和 Quorum Journal Manager(QJM),上 ...
分类:
其他好文 时间:
2019-12-12 12:57:17
阅读次数:
87
RHCS集群安装部署 组件介绍: luci: rhcs集群管理工具-主控端 ricci: rhcs集群管理工具-受控端 rgmanager: 高可用性服务管理 cman: 集群管理 gfs2: 集群文件系统 iscsi-target-utils: iscsi服务端 iscsi-initiator: ...
分类:
数据库 时间:
2019-12-02 11:50:16
阅读次数:
155
1、监控cluster运行状态: # clustat 显示集群的概要信息 # cman_tool status 查看集群信息 # cman_tool nodes -a 查看各个节点简要信息 举例: #1.1 clustat查看集群状态(最常用) 在节点1查看的,状态中的Local就在节点1上显示。 ...
分类:
其他好文 时间:
2019-11-30 11:55:26
阅读次数:
113
负载均衡集群:LVS haproxy 高可用集:keepalived RHCS(主要用于金融机构) 一、LVS配置负载均衡集群 两种模式: 1、LVS/NAT模式负载均衡集群 2、LVS/DR模式负载均衡集群 三种工作模式 1、NAT网络地址转换模式,运用的时NAT地址转换 2、TUN模式:隧道模式 ...
分类:
系统相关 时间:
2019-11-04 22:09:43
阅读次数:
152
RHCS:RedHatClusterSuite红帽集群组件cmanrgmanagerrainternalscript:lsb/etc/rc.d/init.d/*RH6.0corosync(cman)pacemaker(rgmanager)corosync1.4.52.3.0(needle)votequorumgfs:GlobalFileSystemgfs2dlm:DistributedLockMa
分类:
系统相关 时间:
2019-08-17 18:26:33
阅读次数:
154
1 Design document 1.1 System overview We implemented a distributed file system using a quorum based protocol. The basic idea of this protocol is that ...
分类:
其他好文 时间:
2019-08-10 17:25:06
阅读次数:
70
Consistency此命令显示当前的一致性级别,或设置新的一致性级别。Consistency可以理解读和写操作的ConsistencyLevel写操作的consistencylevel指定了写操作在通知客户端请求成功之前,必须确保已经成功完成写操作的replica的数量。QUORUM级别QUORUM级别确保数据写到指定quorum数量的节点。一个quorum的值由下面的公式四舍五入计算而得:(s
分类:
其他好文 时间:
2019-06-29 15:03:21
阅读次数:
164