MySQL 逻辑备份神器

shell > yum -y install gcc gcc-c++ glib2-devel pcre-devel zlib-devel mysql-devel

shell > cd /usr/local/src; wget https://launchpad.net/mydumper/0.9/0.9.1/+download/mydumper-0.9.1.tar.gz
shell > tar zxf mydumper-0.9.1.tar.gz
shell > cd mydumper-0.9.1
shell > cmake . && make && make install

shell > /usr/local/bin/mydumper --help
/usr/local/bin/mydumper: error while loading shared libraries: libmysqlclient.so.18: cannot open shared object file: No such file or directory

shell > find / -name "libmysqlclient.so.18"
/usr/local/src/mysql-5.5.52/libmysql/libmysqlclient.so.18
/usr/local/mysql-5.5.52/lib/libmysqlclient.so.18

shell > ln -s /usr/local/mysql-5.5.52/lib/libmysqlclient.so.18 /usr/lib64/

shell > /usr/local/bin/mydumper --help

-B, --database           指定备份的数据库，不指定时为备份全库(除 information_schema、performance_schema)
-T, --tables-list        指定备份的表，逗号分隔
-o, --outputdir          指定备份目录
-c, --compress           压缩备份输出
-e, --build-empty-files  即使表中无数据也备份成一个文件
-x, --regex              支持正则表达式 db.table，如 --regex ‘^(?!(mysql|test))‘ 不备份 mysql、test 库
-m, --no-schemas         不备份表结构
-d, --no-data            不备份数据
-G, --triggers           备份 triggers
-E, --events             备份 events
-R, --routines           备份存储过程跟函数
-k, --no-locks           不适用共享读锁，会导致数据不一致
-D, --daemon             以守护进程的方式启动
-I, --snapshot-interval  快照间隔时间，默认 60 秒
-h, --host
-u, --user
-p, --password
-P, --PORT
-S, --socket
-t, --threads            启动几个线程，默认 4
-C, --compress-protocol  MySQL 连接上使用压缩协议，建议远程备份时使用
...                      还有一些不常用的指令 通过 --help 获取

shell > /usr/local/bin/mydumper -u xxxx -p xxxx -e -c -B db_xxx -o /data/backup_db/2017-07/db_xxx_05  # 目录 db_xxx_05 会自动创建

shell > ls -1 /data/backup_db/2017-07/db_xxx_05
db_xxx-schema-create.sql.gz
db_xxx.table_1.sql.gz
db_xxx.table_1-schema.sql.gz
...
metadata

# 备份目录下会生成如上几种类型的文件，可以使用 gunzip 解压后读取、分析
# db_xxx-schema-create.sql.gz  备份的数据库创建语句，也就是说恢复时不需要事先创建数据库
# db_xxx.table_1.sql.gz        数据表数据文件
# db_xxx.table_1-schema.sql.gz 数据表结构文件

shell > cat /data/backup_db/2017-07/db_xxx_05/metadata 
Started dump at: 2017-07-05 14:57:56
SHOW MASTER STATUS:
    Log: mysql-bin.000024
    Pos: 760137384
    GTID:(null)

Finished dump at: 2017-07-05 15:01:20

# metadata 记录了备份时刻的 MASTER 信息(如果备份的是从库，还会记录 SLAVE STATUS)，备份开始时间、结束时间

shell > /usr/local/bin/myloader --help

-d, --directory           指定备份数据存放目录
-o, --overwarite-tables   如表存在，则覆盖写入
-B, --database            指定恢复的数据库
-s, --source-db
-e, --enable-binlog 
-h, --host
-u, --user
-p, --password
-P, --PORT
-S, --socket
-t, --threads
-C, --compress-protocol
...

shell > /usr/local/bin/myloader -u xxxx -p xxxx -B db_xxx -d /data/backup_db/2017-07/db_xxx_05

# 这是恢复单库到一个新的 MySQL(不需要提前创建数据库)，不指定 -B 时，恢复备份中的所有数据
# 恢复单表时，解压后直接 source .sql 即可
# 恢复到原库时，需要添加 -o 参数，覆盖写入
# 机器性能允许的情况下，添加 -t 参数，开启多个并行线程恢复