标签:exp perl ESS rop 文件中 tomat 日志 flush ack
(一)什么是二进制日志
二进制日志(binlog)记录了数据库中所有的DDL和DML操作,但是不包括select语句,语句以“事件”的形式保存,记录了数据库的更改变化,在主从复制(replication)和数据恢复中起着重要的作用。对比来看,MySQL的二进制日志作用相当于Oracle数据库的redo log + archive log。
(二)开启二进制日志及参数配置
二进制日志开启需要在配置文件里面配置相关参数,然后重启数据库,或者开启数据库的时候添加相关参数。主要参数如下:
(2.1)log_bin
该参数控制binlog文件存放的位置,用法log_bin=path/file_name。如果没有给出路径,则默认路径为数据文件存放地址(datadir),如果没有给出文件名称,默认文件名为“主机名-bin.num”。初始文件是hostname-bin-000001,每次启动MySQL服务或者刷新时,自动递增编号创建二进制日志文件。
(2.1)binlog_format
该参数控制二进制日志文件的格式,可选格式有:
(2.3)expire_logs_days
该参数控制二进制日志保留天数,过了指定的天数后,日志将会自动删除。
(2.4)max_binlog_size
该参数控制二进制日志文件的大小,当日志文件达到该参数指定的大小时,就会创建新的二进制日志文件。不过,实际上二进制日志文件可能会超过该值,比如当二进制日志快要写满时,执行一个超大事物,由于事物特性决定相关事件必须连续,这种情况下,事件必须写到同一个日志文件,就会出现日志大于 max_binlog_size值的现象。
(2.5)binlog_do_db
该参数控制要保存二进制日志的数据库,如果有多个数据库,需要多次使用该参数,不能使用逗号分隔。
(2.6)binlog_ignore_db
该参数控制要不保存二进制日志的数据库,如果有多个数据库,需要多次使用该参数,不能使用逗号分隔。
(2.7)sync_binlog
该参数控制二进制日志刷新到磁盘的频率,单位为秒(s)。
(2.8)server_id
如果要在MySQL5.7版本中开启binlog,必须设置该参数,否则实例无法启动。
一个简单的参数配置如图:
(三)使用mysqlbinlog查看二进制日志
binlog类型是二进制的,也就意味着我们没法直接打开看,MySQL提供了mysqlbinlog来查看二进制日志,该工具类似于Oracle的logminer。mysqlbinlog用法为
[root@masterdb binlog]# mysqlbinlog
Usage: mysqlbinlog [options] log-files
其中,常用的option选项如下:
option | 作用 |
-d , --database=name | 只列出指定数据库的操作 |
-o , --offset = n | 忽略日志前n行 |
-r , --result-file=name | 将输出的文本格式日志保存到文件 |
-v -vv |
-v :从binlog中重建sql语句 -vv:显示的SQL语句增加了注释,可以理解为-v的增强 |
--start-datetime=datetime --stop-datetime=datetime |
指定日期间隔内的所有日志 |
--start-position=position --stop-position=position |
指定位置间隔内的所有日志 |
例子1:使用--start-datetime和--stop-datetime显示2020年2月12日23:30到2020年2月12日23:50的日志
[root@masterdb binlog]# mysqlbinlog master-bin.000025 --start-datetime=‘2020-02-12 23:30:00‘ --stop-datetime=‘2020-02-12:23:50:00‘ /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=1*/; /*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/; DELIMITER /*!*/; # at 4 #200212 23:40:10 server id 1 end_log_pos 123 CRC32 0xfc4fd0fc Start: binlog v 4, server v 5.7.24-log created 200212 23:40:10 at startup # Warning: this binlog is either in use or was not closed properly. ROLLBACK/*!*/; BINLOG ‘ WhxEXg8BAAAAdwAAAHsAAAABAAQANS43LjI0LWxvZwAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAAA AAAAAAAAAAAAAAAAAABaHEReEzgNAAgAEgAEBAQEEgAAXwAEGggAAAAICAgCAAAACgoKKioAEjQA AfzQT/w= ‘/*!*/; # at 123 #200212 23:40:10 server id 1 end_log_pos 154 CRC32 0x3dc8c184 Previous-GTIDs # [empty] # at 154 #200212 23:40:46 server id 1 end_log_pos 219 CRC32 0x12bba458 Anonymous_GTID last_committed=0 sequence_number=1 rbr_only=no SET @@SESSION.GTID_NEXT= ‘ANONYMOUS‘/*!*/; # at 219 #200212 23:40:46 server id 1 end_log_pos 315 CRC32 0x5ed83729 Query thread_id=3 exec_time=0 error_code=0 use `db1`/*!*/; SET TIMESTAMP=1581522046/*!*/; SET @@session.pseudo_thread_id=3/*!*/; SET @@session.foreign_key_checks=1, @@session.sql_auto_is_null=0, @@session.unique_checks=1, @@session.autocommit=1/*!*/; SET @@session.sql_mode=1436549152/*!*/; SET @@session.auto_increment_increment=1, @@session.auto_increment_offset=1/*!*/; /*!\C utf8 *//*!*/; SET @@session.character_set_client=33,@@session.collation_connection=33,@@session.collation_server=33/*!*/; SET @@session.lc_time_names=0/*!*/; SET @@session.collation_database=DEFAULT/*!*/; create table t1(id int ) /*!*/; SET @@SESSION.GTID_NEXT= ‘AUTOMATIC‘ /* added by mysqlbinlog */ /*!*/; DELIMITER ; # End of log file /*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/; /*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;
(四)二进制日志的作用
(4.1)复制
MySQL Master端的二进制日志发送到slave端,slave端根据日志进行重做,达到主从复制的目的。
(4.2)恢复
不管是使用mysqldump还是xtrabackup,我们都只能将数据库恢复到有备份的时刻,如果要将数据库恢复到任何时刻,则需要使用二进制日志。
(五)相关命令
(5.1)binlog清理
如果业务量较大,binlog日志增长很快,需要定期清理,有好几种方法可以清理日志。
方法1:执行“reset master”命令,该命令将删除所有的binlog日志,新日志编号从“000001”开始
mysql> reset master; Query OK, 0 rows affected (0.00 sec)
方法2:执行“purge master logs to ‘hostname-bin.******’ ”命令,该命令将删除******之前的日志
# 删除‘master-bin.000007‘之前的日志
[root@masterdb binlog]# ls -lrt total 36 -rw-r----- 1 mysql mysql 202 Feb 13 00:20 master-bin.000001 -rw-r----- 1 mysql mysql 202 Feb 13 00:20 master-bin.000002 -rw-r----- 1 mysql mysql 202 Feb 13 00:20 master-bin.000003 -rw-r----- 1 mysql mysql 202 Feb 13 00:20 master-bin.000004 -rw-r----- 1 mysql mysql 202 Feb 13 00:20 master-bin.000005 -rw-r----- 1 mysql mysql 202 Feb 13 00:20 master-bin.000006 -rw-r----- 1 mysql mysql 202 Feb 13 00:20 master-bin.000007 -rw-r----- 1 mysql mysql 154 Feb 13 00:20 master-bin.000008 -rw-r----- 1 mysql mysql 256 Feb 13 00:20 master-bin.index [root@masterdb binlog]# mysql> purge master logs to ‘master-bin.000007‘; Query OK, 0 rows affected (0.00 sec) [root@masterdb binlog]# ls -lrt total 12 -rw-r----- 1 mysql mysql 202 Feb 13 00:20 master-bin.000007 -rw-r----- 1 mysql mysql 154 Feb 13 00:20 master-bin.000008 -rw-r----- 1 mysql mysql 64 Feb 13 00:22 master-bin.index
方法3:执行“purge master logs before‘yyyy-mm-dd hh24:mi:ss’ ”命令,该命令将删除指定日志之前的日志
# 删除2020-02-13 00:24:00之前的日志 mysql> system ls -lrt /mysql/binlog total 36 -rw-r----- 1 mysql mysql 202 Feb 13 00:20 master-bin.000007 -rw-r----- 1 mysql mysql 202 Feb 13 00:25 master-bin.000008 -rw-r----- 1 mysql mysql 202 Feb 13 00:25 master-bin.000009 -rw-r----- 1 mysql mysql 202 Feb 13 00:25 master-bin.000010 -rw-r----- 1 mysql mysql 202 Feb 13 00:25 master-bin.000011 -rw-r----- 1 mysql mysql 202 Feb 13 00:25 master-bin.000012 -rw-r----- 1 mysql mysql 202 Feb 13 00:25 master-bin.000013 -rw-r----- 1 mysql mysql 154 Feb 13 00:25 master-bin.000014 -rw-r----- 1 mysql mysql 256 Feb 13 00:25 master-bin.index
mysql> purge master logs before ‘2020-02-13 00:24:00‘; Query OK, 0 rows affected (0.00 sec) mysql> system ls -lrt /mysql/binlog total 32 -rw-r----- 1 mysql mysql 202 Feb 13 00:25 master-bin.000008 -rw-r----- 1 mysql mysql 202 Feb 13 00:25 master-bin.000009 -rw-r----- 1 mysql mysql 202 Feb 13 00:25 master-bin.000010 -rw-r----- 1 mysql mysql 202 Feb 13 00:25 master-bin.000011 -rw-r----- 1 mysql mysql 202 Feb 13 00:25 master-bin.000012 -rw-r----- 1 mysql mysql 202 Feb 13 00:25 master-bin.000013 -rw-r----- 1 mysql mysql 154 Feb 13 00:25 master-bin.000014 -rw-r----- 1 mysql mysql 224 Feb 13 00:29 master-bin.index
方法4:在配置文件中添加“expire_logs_days”参数,指定过期天数,到期会自动删除。
(5.2)binlog切换
可以使用flush logs或者flush binary logs切换日志。
mysql> show master status; +-------------------+----------+--------------+------------------+-------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set | +-------------------+----------+--------------+------------------+-------------------+ | master-bin.000017 | 154 | db1,db2,db3 | db4 | | +-------------------+----------+--------------+------------------+-------------------+ 1 row in set (0.00 sec) mysql> flush logs; Query OK, 0 rows affected (0.00 sec) mysql> show master status; +-------------------+----------+--------------+------------------+-------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set | +-------------------+----------+--------------+------------------+-------------------+ | master-bin.000018 | 154 | db1,db2,db3 | db4 | | +-------------------+----------+--------------+------------------+-------------------+ 1 row in set (0.00 sec) mysql> flush binary logs; Query OK, 0 rows affected (0.00 sec) mysql> show master status; +-------------------+----------+--------------+------------------+-------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set | +-------------------+----------+--------------+------------------+-------------------+ | master-bin.000019 | 154 | db1,db2,db3 | db4 | | +-------------------+----------+--------------+------------------+-------------------+ 1 row in set (0.00 sec)
(5.3)查看binlog events
mysql> show binlog events in ‘master-bin.000019‘; +-------------------+-----+----------------+-----------+-------------+---------------------------------------+ | Log_name | Pos | Event_type | Server_id | End_log_pos | Info | +-------------------+-----+----------------+-----------+-------------+---------------------------------------+ | master-bin.000019 | 4 | Format_desc | 1 | 123 | Server ver: 5.7.24-log, Binlog ver: 4 | | master-bin.000019 | 123 | Previous_gtids | 1 | 154 | | +-------------------+-----+----------------+-----------+-------------+---------------------------------------+ 2 rows in set (0.00 sec)
(5.4)查看当前biblog位置
mysql> show master status; +-------------------+----------+--------------+------------------+-------------------+ | File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set | +-------------------+----------+--------------+------------------+-------------------+ | master-bin.000019 | 154 | db1,db2,db3 | db4 | | +-------------------+----------+--------------+------------------+-------------------+ 1 row in set (0.00 sec)
【完】
标签:exp perl ESS rop 文件中 tomat 日志 flush ack
原文地址:https://www.cnblogs.com/lijiaman/p/12301998.html