背景说明公司的整个电商系统搭建在华为云上,根据老总的估计,上线3个月之后日订单量会达到百万级别,保守估计3个月之后总订单个数预计会有5千万。MySQL单表达到千万级别,就会出现明显的性能问题。根据如此规模的数据,当时考虑了2套解决方案:方案一在业务上根据用户ID做拆分,将数据打散放在5台32U128G的华为云RDS上边方案二直接使用华为云的分布式数据库中间件DDM方案一的好处是,分片算法全部在业务
分类:
数据库 时间:
2020-12-14 13:58:12
阅读次数:
15
简介01分布式数据库中间件DDM分布式数据库中间件(DistributedDatabaseMiddleware)是解决数据库容量、性能瓶颈和分布式扩展问题的中间件服务,提供分库分表、读写分离、弹性扩容等能力,应对海量数据的高并发访问场景,有效提升数据库读写性能。02MySQLRoutermysql-router是mysql官方的轻量级的中间件,用于取代MySQLProxy应用程序像访问MySQL一
分类:
数据库 时间:
2020-12-14 13:55:48
阅读次数:
13
最近公司新项目使用了华为云的DDM分布式数据库中间件服务,通过一段的时间的使用感觉还不错。近段时间发现有许多小伙伴也准备去使用这个服务,所以为大家分享一下使用创建DDM服务的经验,帮助小伙伴们少走弯路。首先在使用创建DDM实例的时候小伙伴们会遇到的第一个问题应该是如何选择DDM实例的规格,选小了满足不了业务量,选大了浪费多余的性能。那么应该如何解决呢?DDM服务公布了不同规格DDM实例的性能压测数
分类:
数据库 时间:
2020-12-14 13:55:30
阅读次数:
13
前言我们都知道DDM是华为云分布式数据库中间件,在性能、易用性等方面在业界是遥遥领先的。他的成熟不仅仅体现在具有快速水平平滑扩容、支持多种分布式事物类型等等这些高大上的特性上,也体现在DDM诸多的细微之处,今天我和大家分享一个在发展多年的mycat上存在,但是在DDM中不存在的一个不起眼的细微问题(小问题,大灾难,在IT行业的历史上不断重演,我们要警钟长鸣)。这个问题是我在DDM上玩了好多sql之
分类:
其他好文 时间:
2020-12-14 13:54:43
阅读次数:
12
一、前言 xxl-job一个轻量级的分布的调度中间件,详情介绍自己到官网看:https://www.xuxueli.com/xxl-job/ 二、客户端(执行器) 引入依赖compile group: 'com.xuxueli', name: 'xxl-job-core', version: '2. ...
分类:
编程语言 时间:
2020-12-14 13:00:53
阅读次数:
4
前言Canal是阿里巴巴开源的数据库Binlog日志解析框架,主要用途是基于MySQL数据库增量日志解析,提供增量数据订阅和消费。在之前我写的文章阿里开源MySQL中间件Canal快速入门中,我已经介绍了Canal的基本原理和基础使用。在部署到生产环境的过程中,自己作为一个菜鸟,又踩了一些坑,期间做了记录和总结,并再解决后分析了下原因,便有了此文。本文重点内容Canal常见的三大问题原因分析及解决
分类:
其他好文 时间:
2020-12-11 12:06:18
阅读次数:
3
前言距离上一篇文章发布又过去了两周,这次先填掉上一篇秒杀系统文章结尾处开的坑,介绍一下数据库中间件Canal的使用。「Canal用途很广,并且上手非常简单,小伙伴们在平时完成公司的需求时,很有可能会用到。」举个例子:公司目前有多个开发人员正在开发一套服务,为了缩短调用延时,对部分接口数据加入了缓存。一旦这些数据在数据库中进行了更新操作,缓存就成了旧数据,必须及时删除。删除缓存的代码「理所当然可以写
分类:
数据库 时间:
2020-12-11 12:05:29
阅读次数:
4
#中间件的应用场景: 1, 做ip访问频率限制: 某些ip访问服务器的频率过高,进行拦截, 比如每分钟不能超过20次 2, url访问过滤: 如果用户访问的是login(登录)或者register(注册)之类的就放过, 如果访问其他视图, 需要检测是不是有session认证, 已经有了就放行, 没有 ...
分类:
其他好文 时间:
2020-12-09 12:08:57
阅读次数:
5
微信公众号:[中间件兴趣圈]作者简介:《RocketMQ技术内幕》作者;indexaliases,索引别名,有点类似名称映射,一个索引别名可以映射多个真实索引,索引别名在定义时还支持filter,构成同一个索引,不同的视图。思考:一个索引别名可以映射成多个索引,那如果向一个别名添加一个文档时,会在该别名下对应的所有索引下都创建一个文档?如何创建索引别名1POST/_aliases2{3"actio
分类:
其他好文 时间:
2020-12-08 12:48:40
阅读次数:
6
微信公众号:[中间件兴趣圈]作者简介:《RocketMQ技术内幕》作者方案背景背景:基于Dubbo服务的治理,是否可以支持业务级别的灰度发布、是否基于业务参数的路由转发。例如以GIS为例,当发布一个新版本时,是否可以以按照解析地址或合作伙伴来区分,版本发布之初,只希望地址为:广东省的解析请求发送到新版本,而其他的地址请求还是使用旧版;或者根据合作伙伴例如UCP(优享寄)的请求转发到新版本服务器,其
分类:
其他好文 时间:
2020-12-08 12:47:20
阅读次数:
5