一 前期准备 1.1 前置条件 至少有三个不同的主机运行monitor (MON)节点; 至少三个直接存储(非外部SAN硬件)的OSD节点主; 至少两个不同的manager (MGR)节点; 如果使用CephFS,则至少有两个完全相同配置的MDS节点; 如果使用Ceph对象网关,则至少有两个不同的R ...
分类:
其他好文 时间:
2019-03-17 14:00:01
阅读次数:
197
1.hbase整合Mapreduce 在离线任务场景中,MapReduce访问HBASE数据,加快分析速度和扩展分析能力。从hbase中读取数据(result)publiccla***eadHBaseDataMR{privatestaticfinalStringZK_KEY="hbase.zookeeper.quorum";privatestaticfinalStringZK
分类:
其他好文 时间:
2019-01-15 19:33:58
阅读次数:
224
Hive版本是2.1.1,Hbase版本是1.4.3 1. Hbase表映射到Hive表中1.1 Hive的配置文件修改 1.1.1 修改hive-site.xml配置文件,添加配置属性 <property> <name>hbase.zookeeper.quorum</name> <value>se ...
分类:
其他好文 时间:
2019-01-14 14:29:18
阅读次数:
222
红帽认证 RHCSA题库,题库系统免费下载使用,可多次重复练习。
分类:
其他好文 时间:
2018-12-24 00:08:50
阅读次数:
119
今天又过了一天了,今晚在宿舍一个人吃了火锅,我在超市买了重庆火锅的底料,只是在锅里放了1/5的底料就很辣了,当时一直在想重庆人真厉害,吃完大概花了30分钟,吃的过程一直在担心宿管会不会突然过来查宿舍.......如果给抓到可以要通报加检讨了,害怕 还有半个多个月就放假了,特别是要自考而且要考两门,想 ...
分类:
其他好文 时间:
2018-12-14 22:40:36
阅读次数:
169
分布式系统中,一般保存多个数据副本,明显可以提高系统可靠性。并且存储这些数据副本的节点,不仅做容灾用,也可以提供服务,作负载均衡。 这里就涉及到一个数据一致性的问题,也就是各副本间要进行同步,来保持最新的数据。在一些一致性需求不辣么强的场景,比如用户获取某个文章的点赞数,读到未及时同步的脏数据也就无 ...
分类:
编程语言 时间:
2018-10-28 00:06:50
阅读次数:
195
实现集群的产品 1.HA RHCS,heartbeat,keepalivd 2.LB HAProxy LVS Nginx 硬件F5 Piranha 3.HPC ...
分类:
系统相关 时间:
2018-08-25 18:45:53
阅读次数:
169
HA:高可用 1.Quorum Journal Manager:群体日志管理 个数2n+1个,保证节点宕机次数为(n-1)/2;一般情况下,JNS在slave节点开启; 2.HA的namenode个数:一定是两个:nn1和nn2; 3.搭建HA步骤: 0.创建软连接:指向hadoop_cluster ...
分类:
其他好文 时间:
2018-07-28 15:15:05
阅读次数:
181
quorum, psubscribe, sentinel is-master-down-by-addr, Raft...
分类:
其他好文 时间:
2018-07-24 19:58:08
阅读次数:
189
第三十一讲! 分布式文档系统 写一致性原理以及相关参数 课程大纲 (1)consistency,one(primary shard),all(all shard),quorum(default) 我们在发送任何一个增删改操作的时候,比如说put /index/type/id,都可以带上一个consi ...
分类:
其他好文 时间:
2018-07-05 14:59:00
阅读次数:
202