上一篇主要描述了RDB。这一篇将描述AOF。 简单回顾一下RDB存储的弊端: 数据存储量较大,效率较低:基于快照的思想,每次读写的都是全部的数据,当数据量较大时,效率较低; 大数量下的IO性能较低 基于fork创建子进程,内存产生额外消耗 宕机带来的数据丢失风险 解决思路: 不写全数据,仅记录部分数 ...
分类:
其他好文 时间:
2020-11-17 12:52:44
阅读次数:
9
案例|S3、Cassandra、HDFS设计中隐藏的高可用法则Anythingthatcangowrongwillgowrong.会出错的事总会出错。——墨菲定律高可用NoSQL数据库是指服务无中断地持续运行的系统。许多基于网站的业务要求数据服务能够一直不中断。例如,在线购物的数据库需要保证7x24的可用性。为什么需要它们一直运行?假设你的数据库支撑着一个全球化的电子商务网站,那么数分钟的宕机就可
分类:
其他好文 时间:
2020-11-16 13:05:05
阅读次数:
5
AMQP,即Advanced Message Queuing Protocol,高级消息队列协议,是应用层协议的一个开放标准,为面向消息的中间件设计。消息中间件主要用于组件之间的解耦,消息的发送者无需知道消息使用者的存在,反之亦然。 AMQP的主要特征是面向消息、队列、路由(包括点对点和发布/订阅) ...
分类:
其他好文 时间:
2020-11-13 13:06:15
阅读次数:
7
Slack的512宕机故障分析:负载均衡策略的失误本文描述了2020年5月12日导致Slack宕机的技术细节,要想了解更多关于此故障背后的过程,请参阅RyanKatkov的文章AllHandsonDeck(1)。2020年5月12日,Slack发生了很长时间以来的一次重大故障。我们在事件发生后不久就发表了一份故障说明(2),但这是一个有意思的问题,我想更详细地介绍一下围绕它的一些技术问题。用户可见
分类:
其他好文 时间:
2020-11-13 12:37:20
阅读次数:
4
对于redis来说,因为它保存在内存中,是内存性数据库,如果redis重启或者宕机后,其内存中的数据会全部丢失,所以应该想办法将内存中的数据进行持久化保存,等到下次redis重启或者恢复后能够根据这些持久化进行恢复 这里就用到了rdb快照技术,redis会将内存中的数据以rdb文件的形式保存,每当r ...
分类:
数据库 时间:
2020-11-12 14:00:50
阅读次数:
12
为什么说系统越简单,宕机时间越少马士基三E级集装箱船长1,300英尺,在欧洲和亚洲之间11,000英里范围内运载超过18,000个集装箱,并且…所有船员可以塞进一辆中巴车里。作为一名前海军架构师,和现任初创公司的市场咨询师,我发现让13名船员驾驶世界上最大的集装箱船到世界任何港口而不会中途崩溃的原则,也适用于努力实现积极增长的初创公司:系统越简单,宕机时间越少。使用简单系统的船舶,更易于操作和理解
分类:
其他好文 时间:
2020-11-08 16:37:03
阅读次数:
15
RabbitMQ的基本使用 一、引言 模块之间的耦合度多高,导致一个模块宕机后,全部功能都不能用了, 并且同步通讯的成本过高,用户体验差。 RabbitMQ引言 二、RabbitMQ介绍 市面上比较火爆的几款MQ: ActiveMQ,RocketMQ,Kafka,RabbitMQ。 语言的支持:Ac ...
分类:
其他好文 时间:
2020-11-07 17:04:31
阅读次数:
25
Hadoopnamenode高可用性分析:QJM核心源代码解读背景介绍HDFSnamenode在接受写操作时会记录日志,最早HDFS日志写本地,每次重启或出现故障后重启,通过本地镜像文件+操作日志,就能还原到宕机之前的状态,不会出现数据不一致。如果要做高可用(HA),日志写在单个机器上,这个机器磁盘出现问题,重启就恢复不了,导致数据不一致,出现的现象就是新建的文件不存在,删除成功的还在等诡异现象。
分类:
其他好文 时间:
2020-11-07 17:00:30
阅读次数:
24
在生产环境下,单机部署的Redis服务一旦宕机,所有依赖Redis服务的主流服务都会受到影响, 这时就需要一种Redis高可用方案。 一般来说, 一个高可用的方案要满足以下三点要求: 数据备份(冗余) 数据冗余在不同的节点上,防止数据丢失 故障自动切换 正在服务的节点故障时,可以自动地切换到备用节点 ...
分类:
其他好文 时间:
2020-11-06 02:06:32
阅读次数:
16
Hystrix已经停止开发,官方推荐替代项目Resilience4j简介导读:随着微服务的流行,熔断作为其中一项很重要的技术也广为人知。当微服务的运行质量低于某个临界值时,启动熔断机制,暂停微服务调用一段时间,以保障后端的微服务不会因为持续过负荷而宕机。本文介绍了新一代熔断器Resilience4j如何使用。译者注:Hystrix官方已经停止开发了,Hystrix官方推荐使用新一代熔断器作为Res
分类:
其他好文 时间:
2020-11-06 00:58:37
阅读次数:
11