标签:域名 最大 nat ignore sql命令 isp out 主从 restart
Mha-Atlas-MySQL高可用
一、MHA简介
1、软件介绍
MHA在MySQL高可用是一个相对成熟的解决方案,是一套优秀的作为mysql高可用
环境下故障切换和主从提升的高可用软件,在MySQL故障切换过程中,
MHA能做到0~30秒内自动完成数据库的故障切换操作,并且在进行故障
切换过程中,MHA能最大程度上保证数据库的一致性,以达到真正意义上的高可用。
2、MHA组成
MHA由两部分组成:MHA Manager(管理节点)和MHA Node(数据节点)。
MHA Manager可以独立部署在一台独立的机器上管理多个Master-Slave集群,
也可以部署在一台Slave上。当Master出现故障时,它可以自动将最新数据的
Slave提升为新的Master,然后将所有其他的Slave重新指向新的Master。
3、MHA工作流程
①从宕机崩溃的master保存二进制日志时间(binlog events);
②识别含有最近更新的slave;
③应用差异的中继日志(relay log)到其他的slave;
④应用从master保存的二进制日志事件(binlog events);
⑤提升一个slave为新的master;
⑥使其它的slave连接新的master进行复制;
流程详解
1)复制主库binlog日志出来
2)找出relaylog日志最全的从库
3)将最全的relaylog日志在所有从库中同步(第一次同步数据)
4)将之前最全的从库提升为主库
5)将复制出来的binlog日志,放到新提升的主库里
6)其他所有从库重新指向新提升的主库,继续主从复制
4、MHA工具介绍
MHA软件由两部分组成:Manager工具包(管理端)和Node工具包(节点端)
(1)Manager主要包括以下几个工具:
masterha_check_ssh ==>检查MHA的SSH配置状况
masterha_check_repl ==>检查MySQL复制状况
masterha_check_status ==>检测当前MHA运行状态
masterha_master_monitor ==>检测master是否宕机
masterha_manger ==>启动MHA
masterha_master_switch ==>控制故障转移(自动或手动)
masterha_conf_host ==>添加或删除配置的server信息
masterha_secondary_check ==>试图建立TCP连接从远程服务器
masterha_stop ==>停止MHA
(2)Node主要包括以下几个工具:
save_binary_logs ==>保存和复制master的二进制日志
apply_diff_relay_logs ==>识别差异的中继日志事件
filter_mysqlbinlog ==>去除不必要的ROLLBACK事件
purge_relay_logs ==>清除中继日志
二、MHA环境准备
1、准备三台mysql虚拟机
主机名 | IP地址(NAT) | 描述 |
---|---|---|
mysql-db01 | eth0:192.168.200.51 | 系统:CentOS6.5 安装:mysql5.6 |
mysql-db02 | eth0:192.168.200.52 | 系统:CentOS6.5 安装:mysql5.6 |
mysql-db03 | eth0:192.168.200.53 | 系统:CentOS6.5 安装:mysql5.6 |
2、软件包
mha管理节点安装包
mha4mysql-manager-0.56-0.el6.noarch.rpm
mha4mysql-manager-0.56.tar.gz
mha node节点安装包
mha4mysql-nade-0.56-0.el6.noarch.rpm
mha4mysql-node-0.56.tar.gz
mysql中间件
Atlas-2.2.1.el6.x86_64.rpm
mysql源码安装包
mysql-5.6.17-linux-glibc2.5-x86_64tar
3、主机名映射
三台虚拟机,都需要映射三个IP域名
三、MySQL环境准备
三台虚拟机都需要安装MySQL
安装mysql二进制
直接解压即可:解压到/usr/local/
创建用户:
useradd -s /sbin/nologin -M mysql
进入/usr/local/mysql-5.5.32-linux/
做个软连接方便使用==>
ln -s mysql-5.5.32-linux /usr/local/mysql
复制配置文件:
/bin/cp support-files/my-small.cnf /etc/my.cnf
做初始化:
创建mysql数据文件目录==>
mkdir -p /usr/local/mysql/data
授权mysql用户管理mysql的安装目录==>
chown -R mysql.mysql /usr/local/mysql
安装初始化mysql依赖包==>
yum -y install libaio
初始化mysql数据库文件==>
/usr/local/mysql/scripts/mysql_install_db --basedir=/usr/local/mysql --datadir=/usr/local/mysql/data --user=mysql
复制mysql启动脚本到mysql的命令路径==>
cd /usr/local/mysql cp support-files/mysql.server /etc/init.d/mysqld
加x权限,使脚本可执行==>
chmod +x /etc/init.d/mysqld
启动mysql==>
/etc/init.d/mysqld start
给mysql命令做软连接==>
ln -s /usr/local/mysql/bin/* /usr/local/bin
给mysql添加密码==>
mysqladmin -uroot password ‘123123‘
四、配置GTID主从复制
1、GTID主从复制
自动追踪
2、GTID全局事物标识符
是一个唯一的标识符,他创建并与源服务器(主)上提交的每个事物相关联。
GTID实际上是由UUID+TID组成的。其中UUID是一个MySQL实例的唯一标识。
3、GTID的新特性
支持多线程复制,每个库有一个单独的(sql线程)
支持启用GTID,无需再知道binlog和POS点,只需知道master的IP/端口/账号密码即可
基于Row复制只保存改变的列,大大节省磁盘空间,网络,内存等
支持把master和slave的相关信息记录在table中,增强可用性。原来是记录在文件里。
支持延迟复制。
4、先决条件
5、主库配置
#修改主库配置文件/etc/my.cnf [root@mysql-db01 mysql]# cat /etc/my.cnf [client] socket = /usr/local/mysql/data/mysql.sock [mysqld] lower_case_table_names = 1 default-storage-engine = InnoDB port = 3306 datadir = /usr/local/mysql/data character-set-server = utf8 socket = /usr/local/mysql/data/mysql.sock log_bin = mysql-bin #开启binlog日志 server_id = 1 #设置server_id innodb_buffer_pool_size = 200M slave-parallel-workers = 8 thread_cache_size = 600 back_log = 600 slave_net_timeout = 60 max_binlog_size = 512M key_buffer_size = 8M query_cache_size = 64M join_buffer_size = 2M sort_buffer_size = 2M query_cache_type = 1 thread_stack = 192K #重启动MySQL服务 [root@mysql-db01 mysql]# /etc/init.d/mysqld restart Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS!
登录MySQL创建主从复制账号
mysql> grant replication slave on *.* to rep@‘192.168.0.%‘ identified by ‘123123‘; Query OK, 0 rows affected (0.00 sec) mysql> select user,host from mysql.user; +------+-------------+ | user | host | +------+-------------+ | rep | 192.168.0.% | | root | localhost | | root | mysql-db01 | +------+-------------+ 3 rows in set (0.00 sec) mysql> show grants for rep@‘192.168.0.%‘; +--------------------------------------------------------------------------------------------------------------------------+ | Grants for rep@192.168.0.% | +--------------------------------------------------------------------------------------------------------------------------+ | GRANT REPLICATION SLAVE ON *.* TO ‘rep‘@‘192.168.0.%‘ IDENTIFIED BY PASSWORD ‘*E56A114692FE0DE073F9A1DD68A00EEB9703F3F1‘ | +--------------------------------------------------------------------------------------------------------------------------+ 1 row in set (0.00 sec)
6、从库配置
#修改mysql-db02配置文件(和mysql-db01配置文件一致) #只需要修改server-id = 5选项 [root@mysql-db02 ~]# cat /etc/my.cnf [client] socket = /usr/local/mysql/data/mysql.sock [mysqld] lower_case_table_names = 1 default-storage-engine = InnoDB port = 3306 datadir = /usr/local/mysql/data character-set-server = utf8 socket = /usr/local/mysql/data/mysql.sock log_bin = mysql-bin #从binlog也要打开 server_id = 5 #仅需修改此项 innodb_buffer_pool_size = 200M slave-parallel-workers = 8 thread_cache_size = 600 back_log = 600 slave_net_timeout = 60 max_binlog_size = 512M key_buffer_size = 8M query_cache_size = 64M join_buffer_size = 2M sort_buffer_size = 2M query_cache_type = 1 thread_stack = 192K [root@mysql-db02 ~]# /etc/init.d/mysqld restart #重启mysql Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS! #修改mysql-db03配置文件(和mysql-db01配置文件一致) #只需要修改server-id = 10选项 [root@mysql-db03 ~]# cat /etc/my.cnf [client] socket = /usr/local/mysql/data/mysql.sock [mysqld] lower_case_table_names = 1 default-storage-engine = InnoDB port = 3306 datadir = /usr/local/mysql/data character-set-server = utf8 socket = /usr/local/mysql/data/mysql.sock log_bin = mysql-bin #从binlog也要打开 server_id = 10 #只需修改此项 innodb_buffer_pool_size = 200M slave-parallel-workers = 8 thread_cache_size = 600 back_log = 600 slave_net_timeout = 60 max_binlog_size = 512M key_buffer_size = 8M query_cache_size = 64M join_buffer_size = 2M sort_buffer_size = 2M query_cache_type = 1 thread_stack = 192K [root@mysql-db03 ~]# /etc/init.d/mysqld restart #重启mysql Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS!
特别提示:
在以往如果是基于binlog日志的主从复制,则必须要记住主库的master状态信息。
7、开启GTID
查看gtid开没开—>在mysql里输入:
show global variables like ‘%gtid%‘
开启gtid需要在mysql配置文件里[mysqld]模块添加三行代码(三台服务器都需要添加)
gtid_mode = ON log_slave_updates enforce_gtid_consistency
修改完配置文件以后重启动数据库
[root@mysql-db01 ~]# /etc/init.d/mysqld restart Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS! [root@mysql-db02 ~]# /etc/init.d/mysqld restart Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS! [root@mysql-db03 ~]# /etc/init.d/mysqld restart Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS!
再次查看GTID状态
mysql> show global variables like ‘%gtid%‘; +--------------------------+-------+ | Variable_name | Value | +--------------------------+-------+ | enforce_gtid_consistency | ON | #执行GTID一致 | gtid_executed | | | gtid_mode | ON | #开启GTID模块 | gtid_owned | | | gtid_purged | | +--------------------------+-------+ 5 rows in set (0.00 sec)
8、配置主从复制(mysql-db02,mysql-db03)
mysql> change master to -> master_host=‘192.168.0.51‘,\ #主库IP -> master_user=‘rep‘,\ #主库复制用户 -> master_password=‘123123‘,\ #主库复制用密码 -> master_auto_position=1; #GTID位置点(自动追踪需要同步的position) Query OK, 0 rows affected, 2 warnings (0.00 sec)
9、开启从库的主从复制功能(mysql-db02,mysql-db03)
mysql> start slave; #开启主从同步功能 Query OK, 0 rows affected, 1 warning (0.01 sec)
登录mysql输入show slave status\G
查看状态是否IO线程和SQL线程为yes
10、禁止数据库自动删除中继(relaylog)日志,mysql-db02,mysql-db03都需要添加
编辑配置文件/etc/my.cnf
在[mysql]模板下增加relay_log_purge =0永久禁用自动删除relaylog功能
重启mysql==>/etc/init.d/mysqld restart
重启MySQL服务
[root@mysql-db02 ~]# /etc/init.d/mysqld restart Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS! [root@mysql-db03 ~]# /etc/init.d/mysqld restart Shutting down MySQL.. SUCCESS! Starting MySQL. SUCCESS!
五、部署MHA
安装依赖包
yum -y install perl-DBD-MySQL
rpm安装node节点包
rpm -ivh mha4mysql-node-0.56-0.e16.noarch.rpm
MHA需要一个管理账号,登录mysql输入如下代码
grant all privileges on *.* to mha@‘192.168.200.%‘ identified by ‘123123‘
2、部署管理节点(mha-manager)
manager管理端的包不能安装在主库上,安装一个管理端
安装manager依赖包(需要公网源)
wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-6.repo wget -O /etc/yum.repos.d/epel-6.repo http://mirrors.aliyun.com/repo/epel-6.repo yum -y install perl-Config-Tiny epel-release perl-Log-Dispatch perl-Parallel-ForkManager perl-Time-HiRes
createrepo -v . ==>安装当前文件内所有rpm包
安装manager包
rpm -ivh mha4mysql-manager-0.56-0.el6.noarch.rpm
创建配置文件目录
mkdir -p /etc/mha
创建日志目录
mkdir -p /var/log/mha/mha1
进入cd /etc/mha创建第一个mha配置文件==>vim /etc/mha/mha1.cnf
[server default] manager_log=/var/log/mha/mha1/manager ==>manager管理日志存放路径 manager_workdir=/var/log/mha/mha1 ==>manager管理日志的目录路径 master_binlog_dir=/usr/local/mysql/data ==>binlog日志的存放路径 user=mha ==>管理账户 password=123123 ==>管理账户密码 ping_interval=2 ==>存活检查的间隔时间 repl_user=rep ==>主从复制的授权账户 repl_password=123123 ==>主从复制的授权账户密码 ssh_user=root ==>用于ssh连接的账户 [server1] ==>第一台服务器信息 hostname=192.168.200.51 port=3306 [server2] ==>第二台服务器信息 #candidate_master=1 ==>强制将此master提升为主库 #check_repl_delay=0 ==>暂时注释自己试验什么意思 hostname=192.168.200.52 port=3306 [server3] ==>第三台服务器信息 hostname=192.168.200.53 port=3306
特别说明:
参数:candidate_master=1
解释:设置为候选master,如果设置该参数以后,发生主从切换以后会将此从库提升为主库,即使这个主库不是集群中事件最新的slave
参数:check_repl_delay=0
解释:默认情况下如果一个slave落后master 100M的relay logs 的话,MHA将不会选择该slave作为一个新的master,因为对于这个slave的恢复需要花费很长时间,通过设置check_repl_delay=0,MHA触发切换在选择一个新的master的时候将会忽略复制延时,这个参数对于设置了candidate_master=1的主机非常有用,因为这个候选主在切换的过程中一定是新的master
3、配置ssh信任开始分发免秘钥(所有节点mysql-db01,mysql-db02,mysql-db03)
每台服务器都要创建秘钥对
ssh-keygen -t -P "" -f ~/.ssh/id_dsa
发送mysql-db03公钥,包括自己
ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.51 ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.52 ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.53
发送mysql-db02公钥,包括自己
ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.51 ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.52 ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.53
发送mysql-db01公钥,包括自己
ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.51 ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.52 ssh-copy-id -i /root/.ssh/id_dsa.pub root@192.168.200.53
4、启动检测
ssh检查命令
masterha_check_ssh --conf=/etc/mha/mha1.cnf
Tue Sep 5 03:01:40 2017 - [debug] Connecting via SSH from root@192.168.0.53(192.168.0.53:22) to root@192.168.0.52(192.168.0.52:22).. Tue Sep 5 03:01:40 2017 - [debug] ok. Tue Sep 5 03:01:40 2017 - [info] All SSH connection tests passed successfully. #出现这个就表示成功
主从复制检测
masterha_check_repl --conf=/etc/mha/mha1.cnf
因此在mysql-db02和mysql-db03上添加主从复制的用户即可。
grant replication slave on *.* to rep@‘192.168.200.%‘ identified by ‘123123‘;
再次检查
5、启动MHA
nohup masterha_manager --conf=/etc/mha/mha1.cnf --remove_dead_master_conf --ignore_last_failover < /dev/null > /var/log/mha/mha1/manager.log 2>&1 &
ps -ef | grep perl
nohup 启动命令
--conf 指定配置文件位置
--remove_dead_master_conf 如果有master down了,就去掉配置文件里该master的部分
标签:域名 最大 nat ignore sql命令 isp out 主从 restart
原文地址:https://www.cnblogs.com/tang-j-l/p/10015166.html