高性能Web服务之haproxy应用详解及实现论坛的动静分离机制

标签：web服务器   解决方案   default   虚拟主机   discuz   

  HAProxy提供高可用性、负载均衡以及基于TCP和HTTP应用的代理，支持虚拟主机，它是免费、快速并且可靠的一种解决方案。HAProxy特别适用于那些负载特大的web站点，这些站点通常又需要会话保持或七层处理。HAProxy运行在当前的硬件上，完全可以支持数以万计的并发连接。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中， 同时可以保护你的web服务器不被暴露到网络上。

   下面通过案例架构详解HAproxy应用，架构图如下所示:

以上架构实现过程如下:

(1).在node1,node2,node3配置网络指向网关为:192.168.56.10

--node1配置如下:
# ifconfig eth0 192.168.56.11/24
# route add default gw 192.168.56.10
--node2配置如下:
# ifconfig eth0 192.168.56.12/24
# route add default gw 192.168.56.10
--node3配置如下:
# ifconfig eth0 192.168.56.13/24
# route add default gw 192.168.56.10

(2).在node1,node2,node3安装httpd,php,php-mysql

--node1安装配置
# yum -y install httpd php php-mysql

--node2安装配置
# yum -y install httpd php php-mysql

--node3安装配置
# yum -y install httpd php php-mysql

(3)在node4上安装mysql并启动

# yum -y install mysql mysql-server
# service mysqld start
# chkconfig mysqld on

(4)在node4数据库服务器上创建Discuz数据库

# mysql
--创建一个discuz论坛用的数据库，数据库名叫dzbbs
mysql> CREATE DATABASE dzbbs;
--创建并授权账号bbsroot密码redhat给dzbbs库，授权范围为全网
mysql> GRANT ALL PRIVILEGES ON dzbbs.* to bbsroot@‘%‘ IDENTIFIED BY ‘redhat‘;

---创建并授权账号bbsroot密码redhat给dzbbs库，授权范围为本地主机
mysql> GRANT ALL PRIVILEGES ON dzbbs.* to bbsroot@localhost IDENTIFIED BY ‘redhat‘;

--刷新数据权限
mysql> FLUSH PRIVILEGES;

(5)配置node1,node2,node3的web服务

--node1配置如下:
ServerName node1.samlee.com:80
DocumentRoot "/var/www/html/upload"
DirectoryIndex index.php index.html

--node2配置如下:
ServerName node2.samlee.com:80
DocumentRoot "/var/www/html/upload"
DirectoryIndex index.php index.html

--node3配置如下:
ServerName node3.samlee.com:80
DocumentRoot "/var/www/html/upload"
DirectoryIndex index.php index.html

--node1,node2,node3检查配置httpd文件，重启httpd服务
# httpd -t    --检查时可能会报错，因为"/var/www/html/upload"不存在
# service mysqld retart

(6)部署discuz程序目录架构(node1下操作)

# wget  http://download.comsenz.com/DiscuzX/3.2/Discuz_X3.2_SC_UTF8.zip
# mkdir /usr/src/Discuz
# unzip -d /usr/src/Discuz /usr/src/Discuz_X3.2_SC_UTF8.zip
# cp -a /usr/src/Discuz/* /var/www/html/
# chmod -R 777 /var/www/html/upload/*

安装向导部署如下所示:

(7)将node1上"/var/www/html/"下所有文件及目录全部复制node2,node3网站主页下

# scp -r /var/www/html/* root@node2:/var/www/html/
# scp -r /var/www/html/* root@node3:/var/www/html/

--重启所有web-httpd服务
# for i in node2 node3;do ssh $i ‘service httpd restart‘;done

(8)将node1上上"/var/www/html/upload/"下的static和data静态数据文件共享给node2,node3挂载使用

---/var/www/html/upload中需要挂载的目录如下
data   ┄┄┄数据缓存及附件
static ┄┄┄静态文件

配置node1为NFS共享存储服务

--centos 6.5已经安装NFS服务
--配置共享挂载目录
# vim /etc/exports
#NFS输出目录为data，可以访问这个目录的主机为node2和node3，权限为读写，访问uid为0(root)，允许超过1024的端口号连接
/var/www/html/upload/data/ 192.168.56.12(rw,all_squash,anonuid=0,insecure)
/var/www/html/upload/data/ 192.168.56.13(rw,all_squash,anonuid=0,insecure)
#NFS输出目录为static，可以访问这个目录的主机为node2和node3，权限为读写，访问uid为0(root)，允许超过1024的端口号连接
/var/www/html/upload/static/ 192.168.56.12(rw,all_squash,anonuid=0,insecure)
/var/www/html/upload/static/ 192.168.56.13(rw,all_squash,anonuid=0,insecure)

--重启nfs服务并加入自启动服务列表
# service nfs restart
# chkconfig nfs on

--刷新挂载目录
# exportfs -ra
--查看nfs共享状态
# showmount -e
Export list for node1.samlee.com:
/var/www/html/upload/static 192.168.56.13,192.168.56.12
/var/www/html/upload/data   192.168.56.13,192.168.56.12

在node2上配置挂载:

--使用/etc/fstab挂载共享目录
# vim /etc/fstab 
192.168.56.11:/var/www/html/upload/static    /var/www/html/upload/static    nfs    defaults,_rnetdev    0 0
192.168.56.11:/var/www/html/upload/data        /var/www/html/upload/data    nfs    defaults,_rnetdev    0 0
--重新挂载所有目录
# mount -a

在node3上配置挂载:

--使用/etc/fstab挂载共享目录
# vim /etc/fstab 
192.168.56.11:/var/www/html/upload/static    /var/www/html/upload/static    nfs    defaults,_rnetdev    0 0
192.168.56.11:/var/www/html/upload/data        /var/www/html/upload/data    nfs    defaults,_rnetdev    0 0
--重新挂载所有目录
# mount -a

(9)配置public主机网络环境

--eth0配置如下:
# ifconfig eth1 172.16.100.1/16
# route add default gw 172.16.0.1
--eth1配置如下:
# ifconfig eth1 192.168.56.10/24

(10)安装haproxy工具(在public主机上操作)

# yum -y install haproxy

(11)配置系统日志记录haproxy日志记录至指定目录

# vim /etc/rsyslog.conf 
# Provides UDP syslog reception    --监听udp514端口
$ModLoad imudp
$UDPServerRun 514

# Provides TCP syslog reception    --监听tcp514端口
$ModLoad imtcp
$InputTCPServerRun 514

# Save haproxy messages 
local3.*                                                /var/log/haproxy.log

重启rsyslog服务，查询监听端口:

# service rsyslog restart
# ss -tunlp | grep 514
udp    UNCONN     0      0                      *:514                   *:*      users:(("rsyslogd",3612,3))
udp    UNCONN     0      0                     :::514                  :::*      users:(("rsyslogd",3612,4))
tcp    LISTEN     0      25                    :::514                  :::*      users:(("rsyslogd",3612,2))
tcp    LISTEN     0      25                     *:514                   *:*      users:(("rsyslogd",3612,1))

以上可以说明rsyslog记录日志配置成功。

(12)配置haproxy实现---haproxy统计页面的输出机制---haproxy动静分离机制；

# vim /etc/haproxy/haproxy.cfg
==========================================================================================
global    #全局配置
 
    log         127.0.0.1 local3      #日志纪录位置
 
    chroot      /var/lib/haproxy       #haproxy的工作目录
    pidfile     /var/run/haproxy.pid   #pid文件位置
    maxconn     4000                   #最大连接数
    user        haproxy                #运行时使用的用户身份
    group       haproxy                #运行时使用的组身份
    daemon                             #启动为守护进程，不加此处运行在前台
     
    stats socket /var/lib/haproxy/stats    #本地访问stats统计信息时以套接字方式通信
===========================================================================================     
defaults                                          #默认配置
    mode                    http                  #已http模式运行
    log                     global                  #默认日志为全局配置中日志的设置
    option                  httplog
    option                  dontlognull
    option http-server-close
    option forwardfor       except 127.0.0.0/8    #除本机外所有发往服务器的请求首部中加入“X-Forwarded-For”首部
    option                  redispatch
    retries                 3
    timeout http-request    10s
    timeout queue           1m
    timeout connect         10s
    timeout client          1m
    timeout server          1m
    timeout http-keep-alive 10s
    timeout check           10s
    maxconn                 3000    #前端最大并发连接数
==========================================================================================     
listen static                         #设置统计报告页面
    bind *:5656                         #监听在本机5656端口
    stats enable                     #打开统计页面功能
    stats hide-version                 #隐藏haproxy版本
    stats uri /hadmin?stats             #统计页面路径
    stats realm "HAProxy/ Static"    #打开统计页面的认证功能
    stats auth haproxy:redhat        #进入统计页面所使用的账号haproxy 密码redhat
    stats admin if TRUE              #条件满足时进入管理级别
==========================================================================================     
frontend  bbs    #前端设置
    bind *:80    #监听在80端口
    acl url_static path_beg -i /data /static /images /javascript /stylesheets    #url开头为这些的静态内容
    acl url_static path_end -i .jpg .gif .png .css .js .html .ico    #url结尾带为这些的静态内容
    use_backend staser  if url_static    #如果静态内容符合url_static的条件，就调度到staser中的服务器
    default_backend             dyser    #其他默认调度到dyser中的服务器
     
backend dyser    #后端动态内容服务器设置
    cookie samlee insert nocache    #在cookie中插入samlee字串防止登录信息丢失
    balance     roundrobin           #调度算法为轮询
    server      node2 192.168.56.12:80 check
    server      node3 192.168.56.13:80 check
     
backend staser    #后端静态内容服务器设置
    balance     roundrobin
    server  node1 192.168.56.11:80 check

重启haproxy服务,检查监听端口:

# service haproxy restart
# ss -tunlp | grep 80
tcp    LISTEN     0      128                    *:80                    *:*      users:(("haproxy",3816,6))
# ss -tunlp | grep 5656
tcp    LISTEN     0      128                    *:5656                  *:*      users:(("haproxy",3816,4))

(13)修改node1,node2,node3的http配置文件，记录实际访问主机的ip地址信息而不是haproxy代理地址

# vim /etc/httpd/conf/httpd.conf
#修改一下内容
LogFormat "%{X-Forwarded-For}i %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" combined
# service httpd reload

(14)最后测试如下:

(1)使用地址http://public.samlee.com访问测试如下所示:

(2)使用地址:http://public.samlee.com:5656/hadmin?stats访问测试--用户:haproxy 密码:redhat 如下所示:

(3)登录论坛上传图片测试:

在新窗口打开图片进行静态图片读取测试:

(4)测试cookie中记录samlee是否生效

(5)查询httpd日志状态如下所分析出，动静分离机制已实现:

# for i in node1 node2 node3;do ssh $i ‘tail -1 /var/log/httpd/access_log‘;done
192.168.56.1 - - [16/Sep/2016:15:40:57 +0800] "GET /static/image/admincp/bg_login.gif HTTP/1.1" 200 475 "http://public.samlee.com/static/image/admincp/admincp.css" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/52.0.2743.116 Safari/537.36"
192.168.56.1 - - [16/Sep/2016:15:40:57 +0800] "GET /admin.php HTTP/1.1" 200 2686 "http://public.samlee.com/forum.php?mod=viewthread&tid=1&extra=page%3D1" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/52.0.2743.116 Safari/537.36"
192.168.56.1 - - [16/Sep/2016:15:40:59 +0800] "GET /misc.php?mod=patch&action=pluginnotice&inajax=1&ajaxtarget=plugin_notice HTTP/1.1" 200 65 "http://public.samlee.com/forum.php?mod=viewthread&tid=1&extra=page%3D1" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/52.0.2743.116 Safari/537.36"

本文出自 “Opensamlee” 博客，请务必保留此出处http://gzsamlee.blog.51cto.com/9976612/1853122

高性能Web服务之haproxy应用详解及实现论坛的动静分离机制

标签：web服务器   解决方案   default   虚拟主机   discuz   

原文地址：http://gzsamlee.blog.51cto.com/9976612/1853122