redis3.0集群部署和测试
环境介绍
两台Centos7的虚拟机模拟6个节点,A台3个master节点,B台3个slave节点
A地址:172.16.81.140
B地址:172.16.81.141
redis版本:redis-3.2.4
部署前准备
关闭防火墙--->systemctl stop firewalld
开机禁用防火墙--->systemctl disable firewalld
临时关闭selinux--->setenforce 0
永久关闭selinux--->sed -i ‘s/SELINUX=enforcing/SELINUX=disabled/g‘ /etc/selinux/config ---> 重启服务器生效
下载并解压redis软件
cd /opt
wget http://download.redis.io/releases/redis-3.2.4.tar.gz
tar -zxvf redis-3.2.4.tar.gz
编译安装
安装依赖包:yum -y install tcl* gcc-c++
cd redis-3.2.4
make
cd src
cp redis-trib.rb /usr/local/bin/
make install
make test
创建redis节点
首先在 A 机器上 /opt/redis-3.2.4 目录下创建 redis_cluster 目录
mkdir redis_cluster
在redis_cluster目录下创建7000,7001,7002目录
cd redis_cluster/
mkdir 7000 7001 7002
将配置文件redis.conf拷贝到三个目录下
cp /opt/redis-3.2.4/redis.conf /opt/redis-3.2.4/redis_cluster/7000
cp /opt/redis-3.2.4/redis.conf /opt/redis-3.2.4/redis_cluster/7001
cp /opt/redis-3.2.4/redis.conf /opt/redis-3.2.4/redis_cluster/7002
然后B机器上也是同样的操作,只不过节点目录改为7003,7004,7005三个目录
修改节点配置文件
A服务器进入到7000,7001,7002目录下
sed -i ‘s/bind 127.0.0.1/bind 172.16.81.140/g‘ redis.conf #更改绑定地址7000,7001,7002绑定A服务器地址
sed -i ‘s/port 6379/port 7000/g‘ redis.conf #更改端口为对应目录的端口号
sed -i ‘s/daemonize no/daemonize yes/g‘ redis.conf #开启后台运行
sed -i ‘s/redis_6379.pid/redis_7000.pid/g‘ redis.conf #pid文件更改端口为对应目录的端口号
sed -i ‘s/appendonly no/appendonly yes/g‘ redis.conf #aof日志开启 有需要就开启,它会每次写操作都记录一条日志
sed -i ‘s/# cluster-enabled yes/cluster-enabled yes/g‘ redis.conf #开启集群,去掉#号
sed -i ‘s/# cluster-config-file nodes-6379.conf/cluster-config-file nodes-7000.conf/g‘ redis.conf #首次运行生成集群配置文件对应的端口号
sed -i ‘s/# cluster-node-timeout 15000/cluster-node-timeout 15000/g‘ redis.conf #请求超时时间,默认15S
B服务器进入到7003,7004,7005目录下
sed -i ‘s/bind 127.0.0.1/bind 172.16.81.141/g‘ redis.conf
sed -i ‘s/port 6379/port 7003/g‘ redis.conf
sed -i ‘s/daemonize no/daemonize yes/g‘ redis.conf
sed -i ‘s/redis_6379.pid/redis_7003.pid/g‘ redis.conf
sed -i ‘s/appendonly no/appendonly yes/g‘ redis.conf
sed -i ‘s/# cluster-enabled yes/cluster-enabled yes/g‘ redis.conf
sed -i ‘s/# cluster-config-file nodes-6379.conf/cluster-config-file nodes-7003.conf/g‘ redis.conf
sed -i ‘s/# cluster-node-timeout 15000/cluster-node-timeout 15000/g‘ redis.conf
启动redis每个节点
cd /opt/
A机器上执行
redis-server redis_cluster/7000/redis.conf
redis-server redis_cluster/7001/redis.conf
redis-server redis_cluster/7002/redis.conf
B机器上执行
redis-server redis_cluster/7003/redis.conf
redis-server redis_cluster/7004/redis.conf
redis-server redis_cluster/7005/redis.conf
检查启动情况
A服务器:
B服务器:
启动正常!!!
创建REDIS集群
redis-trib.rb create --replicas 1 172.16.81.140:7000 172.16.81.140:7001 172.16.81.140:7002 172.16.81.141:7003 172.16.81.141:7004 172.16.81.141:7005
安装ruby
redis-trib.rb需要ruby支持,所以需要安装ruby
yum -y install ruby ruby-devel rubygems rpm-build
安装ruby的redis接口
gem install redis --version 3.2.1
需要根据redis版本安装,否则会报错!
在执行创建redis集群
redis-trib.rb create --replicas 1 172.16.81.140:7000 172.16.81.140:7001 172.16.81.140:7002 172.16.81.141:7003 172.16.81.141:7004 172.16.81.141:7005
集群创建成功!!!
redis集群测试
A服务器:
B服务器:
测试完成!!!
集群大致原理:
redis cluster在设计的时候,就考虑到了去中心化,去中间件,也就是说,集群中的每个节点都是平等的关系,都是对等的,每个节点都保存各自的数据和整个集群的状态。每个节点都和其他所有节点连接,而且这些连接保持活跃,这样就保证了我们只需要连接集群中的任意一个节点,就可以获取到其他节点的数据。
Redis 集群没有并使用传统的一致性哈希来分配数据,而是采用另外一种叫做哈希槽 (hash slot)
的方式来分配的。redis cluster 默认分配了 16384 个slot,当我们set一个key 时,会用CRC16
算法来取模得到所属的slot
,然后将这个key 分到哈希槽区间的节点上,具体算法就是:CRC16(key) % 16384。所以我们在测试的时候看到set 和 get 的时候,直接跳转到了7000端口的节点。
Redis 集群会把数据存在一个 master 节点,然后在这个 master 和其对应的salve 之间进行数据同步。当读取数据时,也根据一致性哈希算法到对应的 master 节点获取数据。只有当一个master 挂掉之后,才会启动一个对应的 salve 节点,充当 master 。
需要注意的是:必须要3个或以上
的主节点,否则在创建集群时会失败,并且当存活的主节点数小于总节点数的一半时,整个集群就无法提供服务了。