码迷,mamicode.com
首页 > 数据库 > 详细

mysql主从同步原理

时间:2019-05-25 20:09:30      阅读:176      评论:0      收藏:0      [点我收藏+]

标签:测试   解决方案   数据   存在   文件   延迟   机器   业务   答案   

为什么要做主从复制?
1、在业务复杂的系统中,有这么一个情景,有一句sql语句需要锁表,导致暂时不能使用读的服务,那么就很影响运行中的业务,使用主从复制,让主库负责写,从库负责读,这样,即使主库出现了锁表的情景,通过读从库也可以保证业务的正常运作。

2、做数据的热备

3、架构的扩展。业务量越来越大,I/O访问频率过高,单机无法满足,此时做多库的存储,降低磁盘I/O访问的频率,提高单个机器的I/O性能。


基本构建思路
–确保数据相同:从库必须要有主库上的数据
–配置主服务器:启用binlog日志,授权用户,查看当前正使用的Binlog日志(从库IO线程取SQL命令的地方)
–配置从服务器:设置server_id(标识自己的身份),指定主库信息
–测试配置: 客户端连接主库写入数据,在从库上也能查询到

mysql主从复制用途
实时灾备,用于故障切换
读写分离,提供查询服务
备份,避免影响业务

Master,记录数据更改操作
启用binglog日志
设置binlog日志格式
设置server_id

slave运行2个线程
slave_io线程:复制master主机 binlog日志文件里的sql到本机的relay-log文件里。
slave_sql线程:执行本机relay-log文件里的sql语句,重现Master的数据操作。

binlog(二进制文件)
relay-log(中继日志)

异步复制:
主库执行一次事务后,立即将结果返回给客户端,并不关心从库是否已经接收并处理

全同步复制:
当主库执行完一次事物,并所有从库都执行了该事务后才返回给客户端

半同步复制:
介于异步和全同步之间
主库在执行完一次事务后,等待至少一个从库接受到并写到中继日志中才返回客户端


问题及解决方法

mysql主从复制存在的问题:
主库宕机后,数据可能丢失
从库只有一个sql Thread,主库写压力大,复制很可能延时

解决方法:
半同步复制---解决数据丢失的问题
并行复制----解决从库复制延迟的问题

  1. MySQL数据库主从同步延迟原理。

答:谈到MySQL数据库主从同步延迟原理,得从mysql的数据库主从复制原理说起,mysql的主从复制都是单线程的操作,主库对所有DDL和 DML产生binlog,binlog是顺序写,所以效率很高,slave的Slave_IO_Running线程到主库取日志,效率很比较高,下一步, 问题来了,slave的Slave_SQL_Running线程将主库的DDL和DML操作在slave实施。DML和DDL的IO操作是随即的,不是顺 序的,成本高很多,还可能可slave上的其他查询产生lock争用,由于Slave_SQL_Running也是单线程的,所以一个DDL卡主了,需要 执行10分钟,那么所有之后的DDL会等待这个DDL执行完才会继续执行,这就导致了延时。有朋友会问:“主库上那个相同的DDL也需要执行10分,为什 么slave会延时?”,答案是master可以并发,Slave_SQL_Running线程却不可以。

  1. MySQL数据库主从同步延迟是怎么产生的。

答:当主库的TPS并发较高时,产生的DDL数量超过slave一个sql线程所能承受的范围,那么延时就产生了,当然还有就是可能与slave的大型query语句产生了锁等待。

  1. MySQL数据库主从同步延迟解决方案

答:最简单的减少slave同步延时的方案就是在架构上做优化,尽量让主库的DDL快速执行。还有就是主库是写,对数据安全性较高,比如 sync_binlog=1,innodb_flush_log_at_trx_commit = 1 之类的设置,而slave则不需要这么高的数据安全,完全可以讲sync_binlog设置为0或者关闭binlog,innodb_flushlog也 可以设置为0来提高sql的执行效率。另外就是使用比主库更好的硬件设备作为slave。

mysql主从同步原理

标签:测试   解决方案   数据   存在   文件   延迟   机器   业务   答案   

原文地址:https://blog.51cto.com/14050800/2400086

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!