当MySQL单表记录数过大时,数据库的增删改查性能会明显下降,常见的优化方法如下: (1)限定数据的范围 务必禁止不带任何限制数据范围条件的查询语句。比如我们当用户在查询订单历史的时候,可以控制在一个月范围内。 (2)读写分离 经典的数据库拆分方案,主库负责写,从库负责读。 (3)垂直分区 根据数据 ...
分类:
其他好文 时间:
2021-07-19 16:43:09
阅读次数:
0
1 概述 本文主要讲述了如何在主从复制的过程中使用SSL进行加密,还有binlog加密(MySQL 8.0.14+)的实现。 2 环境 MySQL 8.0.25 Docker 一主一从 3 准备容器 先拉取镜像并启动,主库3306,从库3307,还需要加上--ssl参数,以开启SSL加密连接的功能: ...
分类:
数据库 时间:
2021-06-28 18:46:50
阅读次数:
0
一、主从怎么保持数据一致 Redis 的主从库同步有三种模式:全量复制、基于长连接的命令传播,以及增量复制。 1.第一次主从库同步 它们相互之间就可以通过 replicaof命令形成主库和从库的关系,之后会按照如下图所示三个阶段完成数据的第一次同步 FULLRESYNC 响应表示第一次复制采用的全量 ...
分类:
其他好文 时间:
2021-06-24 18:30:54
阅读次数:
0
一、数据切分 关系型数据库本身比较容易成为系统瓶颈,单机存储容量、连接数、处理能力都有限。当单表的数据量达到 1000W 或 100G 以后,由于查询维度较多,即使添加从库、优化索引,做很多操作时性能仍下降严重。此时就要考虑对其进行切分了,切分的目的就在于减少数据库的负担,缩短查询时间。 数据库分布 ...
分类:
数据库 时间:
2021-06-22 18:08:23
阅读次数:
0
使用Kettle工具进行增量数据同步 使用Kettle工具进行增量数据同步 - 简书 (jianshu.com) 增量同步的方式有很多种,我使用的是: 快照表 + 触发器 需求: 当主库库表发生增删改时,从库库表与主库库表数据保持一致。 环境: 1、Mysql 2、kettle 7.1 思路: 1、 ...
分类:
其他好文 时间:
2021-06-18 19:54:36
阅读次数:
0
mysql 各个版本重要新特性 mysql 5.5:1、支持online ddl2、默认存储引擎为innodb3、引入半同步异步复制(主库在提交事务后,会等待从库反馈收到relay log) mysql 5.6:1、支持gtid复制(备库需log_slave_updates=on开启bin log) ...
分类:
数据库 时间:
2021-06-16 18:25:25
阅读次数:
0
############################# mysql服务器使用时间越久,性能越差,这句话像是一句废话, 特别是当服务器上的mysql服务处于较大的QPS的时候,就会非常明显 那么是如何发现的呢? 在我给falcon监控业务替换机器的时候,发现同配置的新机器的从库主从延迟很小很小,而 ...
分类:
数据库 时间:
2021-06-08 22:53:48
阅读次数:
0
我这里的是dataguard环境,我尝试将从库删除进行重新配置,下面是报错个解决办法: [oracle@18c_single ~]$ dbca -silent -deleteDatabase -sourceDB ora18c[FATAL] [DBT-10201] Delete database op ...
分类:
其他好文 时间:
2021-06-02 14:09:20
阅读次数:
0
环境:1主1从,Manager放在从库。主库:192.168.0.10从库:192.168.0.20 两台机器的mysql安装完成初始化以后进行复制搭建,首先登录主库(192.168.0.10),查看pos点:mysql> show master status; 然后在主库(192.168.0.10 ...
分类:
其他好文 时间:
2021-05-25 18:01:54
阅读次数:
0
前言 现代业务越来越复杂,数据量也越来越大,关系型数据库本身就比较容易形成系统瓶颈,单机存储容量,连接数,处理能力都有限。 当单表的数据量达到一定量级以后,比如1000万,由于查询维度较多,即使添加从库,优化索引,做很多操作时性能还是下降严重。 这个时候要如何提高数据的性能呢? 有人说,可以通过提升 ...
分类:
其他好文 时间:
2021-05-24 13:31:00
阅读次数:
0