MongoDB Windows 集群配置 一、实验环境 : Win7(X64),MongoDB 3.0.3 二、一台Win7电脑,配置方案如下: 1. 3个分片sharding 2. 每一个分片由3个节点构成1主2备的Replica Sets 3. 3个配置节点Configsever 4. 1个路由 ...
分类:
数据库 时间:
2018-01-08 10:59:10
阅读次数:
247
一、分布式数据一致性 在分布式系统中,为了保证数据的高可用,通常会将数据保留多个副本(replica),这些副本会放置在不同的物理的机器上。 (1)什么是数据一致性 在数据有多份副本的情况下,如果网络、服务器或者软件出现故障,会导致部分副本写入成功,部分副本写入失败。这就造成各个副本之间的数据不一致 ...
分类:
其他好文 时间:
2018-01-07 17:38:38
阅读次数:
193
同一台电脑配置mysql5.5两个实例,分别在3310和3311两个端口。设定3310为主库,3311为从库。 最终效果如下: 3310主库: 3311从库: 至此,配置完毕,通过命令: 查看同步是否连接成功,关键指标为: 备注: 默认配置的mysql中root账户无密码,通过如下方式修改: 附my ...
分类:
数据库 时间:
2018-01-06 23:24:27
阅读次数:
289
MySQL备份工具,支持各种参数选项,使用不同的选项极有可能影响备份处理过程。本文使用我们常规认为合理的备份参数,测试/验证是否存在容易忽视的坑 # 常规备份参数 # mysqldump shell> mysqldump --single-transaction --master-data=2 -B ...
分类:
数据库 时间:
2018-01-04 19:35:01
阅读次数:
2346
一、概述 为了提升集群的HA,Kafka从0.8版本开始引入了副本(Replica)机制,增加副本机制后,每个副本可以有多个副本,针对每个分区,都会从副本集(Assigned Replica,AR)中,选取一个副本作为Leader副本,所有读写请求都由Leader副本处理,其余的副本被称为Follw ...
分类:
其他好文 时间:
2018-01-01 18:21:11
阅读次数:
202
Kafka Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、storm/ ...
分类:
其他好文 时间:
2017-12-31 11:00:47
阅读次数:
208
一、Elasticsearch对复杂分布式机制透明的隐藏特性 1、分片机制: (1)index包含多个shard,每个shard都是一个最小工作单元,承载部分数据,lucene实例,完整的建立索引和处理请求的能力 (2)shard分为:primary shard和replica shard。 pri... ...
分类:
其他好文 时间:
2017-12-30 18:18:09
阅读次数:
104
MongoDB集群搭建-副本集 概念性的知识,可以参考本人博客地址: 一.Master-Slave方案: 主从: 二.Replica Set方案: 副本集: 步骤:(只要按步骤操作,100%成功) 1.创建文件夹及文件: 文件夹: 创建data文件夹; 创建db文件夹; 创建logs文件夹; 创建配 ...
分类:
数据库 时间:
2017-12-29 12:12:26
阅读次数:
215
ElasticSearch介绍 ElasticSearch是一个 的搜索服务器; 它提供了一个分布式多用户能力的全文搜索引擎, ; Elasticsearch是 的,并作为Apache许可条款下的开放源码发布,是当前流行的企业级搜索引擎(阿里巴巴、Google、京东等都在使用); 设计用于云计算中, ...
分类:
其他好文 时间:
2017-12-26 19:53:38
阅读次数:
2012
MongoDB集群方案介绍及搭建 一.什么是mongodb集群? 是指由多台mongodb服务器组成的服务器集群,称之为mongodb集群。 二.mongodb集群搭建的方式: 1.Replica Set 副本集: 简单来说就是集群当中包含了多份数据,保证主节点挂掉了,备节点能继续提供数据服务,提供 ...
分类:
数据库 时间:
2017-12-23 12:04:46
阅读次数:
165