lvs-dr+keepalived实例架设

标签：status   加ip   htm   etc   date   修改内核   hang   apache   存在   

1、 检查配置real server1（172.16.100.6）的web服务。
~] rpm –q httpd

~] echo ‘’<h1>RS1 CentOS 6</h1>” > /var/www/html/index.html
开启apache服务
~] service httpd start

2、 检查配置real server2（172.16.100.69）的web服务。
~] rpm –q httpd

检查到RS2没有安装httpd
~] yum install httpd -y

~] echo ‘’<h1>RS2 CentOS 7</h1>” > /var/www/html/index.html
开启apache服务
~] systemctl start httpd.service
查看服务是否启动
~] ss –tnl

3、 安装director的ipvsadm
确保ipvs功能存在。（此处不用确认，因为内核中有ipvs功能）
安装ipvsadm。
~] yum install ipvsadm –y

4、 配置director1的vip地址。
~] ifconfig

~] ip addr add 172.16.100.88/32 dev eno16777736

~] ip addr list

5、 在node2上检查node1（director1）的vip地址是否通。
~] ping 172.16.100.88

6、 配置real server1的arp_announce，arp_ignore。
在real server1上编辑一个执行脚本（修改arp_announce，arp_ignore两个内核参数脚本）。
~] vim set.sh

#!/bin/bash
case $1 in
start)
echo 1 > /proc/sys/net/ipv4/conf/all/arp_ignore
echo 1 > /proc/sys/net/ipv4/conf/lo/arp_ignore
echo 2 > /proc/sys/net/ipv4/conf/all/arp_announce
echo 2 > /proc/sys/net/ipv4/conf/lo/arp_announce
;;
stop)
echo 0 > /proc/sys/net/ipv4/conf/all/arp_ignore
echo 0 > /proc/sys/net/ipv4/conf/lo/arp_ignore
echo 0 > /proc/sys/net/ipv4/conf/all/arp_announce
echo 0 > /proc/sys/net/ipv4/conf/lo/arp_announce
;;
esac

执行脚本
~] bash set.sh start

检查内核参数修改情况。
~] cat /proc/sys/net/ipv4/conf/all/arp_ignore
~] cat /proc/sys/net/ipv4/conf/all/arp_announce

7、 把set.sh脚本传递给另一个RS2
~] scp set.sh 172.16.100.69:/root/

8、 在RS2（172.16.100.69）上运行set.sh脚本修改内核参数。
~] bash set.sh start

验证内核参数修改情况
~] cat /proc/sys/net/ipv4/conf/all/arp_ignore

9、 配置RS1（172.16.100.6）的ip地址。
~] ifconfig lo:0 172.16.100.88 netmask 255.255.255.255 broadcast 172.16.100.88 up
~] route add –host 172.16.100.88 dev lo:0

10、 配置RS2（172.16.100.69）的ip地址。
~] ifconfig lo:0 172.16.100.88 netmask 255.255.255.255 broadcast 172.16.100.88 up
~] route add –host 172.16.100.88 dev lo:0

11、 在node1（172.16.100.67）上添加ipvs规则。（下面的-s是算法，-g指明的是dr类型）
~] ipvsadm –A –t 172.16.100.88:80 –s rr
~] ipvsadm –a –t 172.16.100.88:80 –r 172.16.100.6 –g –w 1
~] ipvsadm –a –t 172.16.100.88:80 –r 172.16.100.69 –g –w 2
查看ipvs规则
~] ipvsadm –Ln

12、 用node2作为客户端请求vip看结果。
~] curl http://172.16.100.88

此时证明第一个director1（node1）已经ok。

13、 在node1上清空的ipvs规则，并删除eno16777736的网卡。
~] ipvsadm -C
~] ip addr del 172.16.100.88/32 dev eno16777736
~] ip addr list

14、 安装第二个director2（node2）172.16.100.68。
~] yum –y install ipvsadm

15、 配置node2的vip。
~] ip addr add 172.16.100.88/32 dev eno16777736

16、 生成ipvs规则。
~] ipvsadm –A –t 172.16.100.88:80 –s wrr
~] ipvsadm –a –t 172.16.100.88:80 –r 172.16.100.6 –g –w 1
~] ipvsadm –a –t 172.16.100.88:80 –r 172.16.100.69 –g –w 2

17、 在node1检查node2（172.16.100.68）的LB功能是够正常。
~] curl http://172.16.100.88

此时证明director2功能正常。

18、 在node2上清空的ipvs规则，并删除eno16777736的网卡。
~] ipvsadm –C
~] ip addr del 172.16.100.88/32 dev eno16777736
~] ip addr list

19、 为了让两个node节点都有sorry server，所以两个节点上安装httpd服务。
~] yum –y install httpd

20、 在两个node节点上各自给一个sorry页面。
root@node1 ~] echo “<h1>Sorry, under maintenance</h1>” > /var/www/html/index.html
root@node2 ~] echo “<h1>Sorry, under maintenance(68)</h1>” > /var/www/html/index.html

21、 两个节点上apache服务启动。
node1（172.16.100.67）上执行apache服务启动。
root@node1 ~] systemctl start httpd.service
node2（172.16.100.68）上执行apache服务启动。
root@node2 ~] systemctl start httpd.service

22、 两个节点上安装配置keepalived。
root@node1 ~] yum install keepalived –y
root@node2 ~] yum install keepalived –y

23、 备份两个节点的keepalived.conf配置文件。
root@node1 ~] cd /etc/keepalived/
root@node1 ~] cp keepalived.conf{,.backup}
root@node2 ~] cd /etc/keepalived/
root@node2 ~] cp keepalived.conf{,.backup}

24、 编辑node1节点上的keepalived.conf配置文件和notify.sh脚本。

配置node1节点上的keepalived.conf配置文件。
! Configuration File for keepalived

global_defs {
notification_email { br/>linuxedu@foxmail.com
mageedu@126.com
}
notification_email_from kanotify@magedu.com
smtp_connect_timeout 3
smtp_server 127.0.0.1
router_id LVS_DEVEL
}

authentication {  
    auth_type PASS  
    auth_pass 2231da37af98 #openssl rand –hex 6命令生成随机数
}    
virtual_ipaddress {  
    172.16.100.88/32 dev eno16777736 label eno16777736:1
}  
track_script {  
    chk_mantaince_down
}  

notify_master "/etc/keepalived/notify.sh master"  
notify_backup "/etc/keepalived/notify.sh backup"  
notify_fault "/etc/keepalived/notify.sh fault"  

real_server 172.16.100.69 80 {
    weight 2
    HTTP_GET {
        url { 
          path /
          status_code 200
        }
        connect_timeout 3
        nb_get_retry 3
        delay_before_retry 3
    }
}

global_defs {
notification_email { br/>linuxedu@foxmail.com
mageedu@126.com
}
notification_email_from kanotify@magedu.com
smtp_connect_timeout 3
smtp_server 127.0.0.1
router_id LVS_DEVEL
}

authentication {  
    auth_type PASS  
    auth_pass 2231da37af98 #openssl rand –hex 6命令生成随机数
}    
virtual_ipaddress {  
    172.16.100.88/16 dev eno16777736 label eno16777736:1
}  
track_script {  
    chk_mantaince_down
}  

notify_master "/etc/keepalived/notify.sh master"  
notify_backup "/etc/keepalived/notify.sh backup"  
notify_fault "/etc/keepalived/notify.sh fault"  

real_server 172.16.100.69 80 {
    weight 2
    HTTP_GET {
        url { 
          path /
          status_code 200
        }
        connect_timeout 3
        nb_get_retry 3
        delay_before_retry 3
    }
}

30、 用node2节点来访问vip看集群架设是否正常。
root@node2 ~] crul http://172.16.100.88

31、 此时让RS1（172.16.100.6）下线，看分发情况。
root@RS1 ~] service httpd stop

在node1（MASTER）上查看ipvs规则，是否自动清掉RS1。
root@node1 ~] ipvsadm –Ln

在node2上执行curl命令看访问效果。
root@node2 ~] curl http://172.16.100.88

32、 此时让RS1（172.16.100.6）上线，还在node2上执行curl命令查看RS1是否被重新加入ipvs规则中。
root@node2 ~] curl http://172.16.100.88

33、 当所有的RS挂掉后，node节点上应该有个sorry server提示，sorry server定义在virtual server里面。

34、 关闭一台node1，看vip能否转移。可以stop keepalived服务，也可以在keepalived目录中创建一个/etc/keepalived/down文件让vip从master中转移到backup中；在删除node1的down文件，看vip转移。以此来证明HA的架构是否有问题。

35、 关闭两台node。访问vip（172.16.100.88）看是否有sorry server。

lvs-dr+keepalived实例架设

标签：status   加ip   htm   etc   date   修改内核   hang   apache   存在   

原文地址：http://blog.51cto.com/14044882/2309780