haproxy高可用负载均衡

meimei10251314

　　常见的做负载均衡的机制：nginx，lvs，haproxy
　　适合做网站调度：nginx，haproxy
　　适合做应用层，如mysql数据库：lvs
　　haproxy特点：吞吐量很高
　　
HAProxy提供高可用性、负载均衡以及基于TCP和HTTP应用的代 理，支持虚拟主机，它是免费、快速并且可靠的一种解决方案。HAProxy特别适用于那些负载特大的web站点，这些站点通常又需要会话保持或七层处理。HAProxy运行在当前的硬件上，完全可以支持数以万计的并发连接。并且它的运行模式使得它可以很简单安全的整合进您当前的架构中， 同时可以保护你的web服务器不被暴露到网络上。
HAProxy实现了一种事件驱动, 单一进程模型，此模型支持非常大的并发连接数。多进程或多线程模型受内存限制 、系统调度器限制以及无处不在的锁限制，很少能处理数千并发连接。事件驱动模型因为在有更好的资源和时间管理的用户端(User-Space) 实现所有这些任务，所以没有这些问题。此模型的弊端是，在多核系统上，这些程序通常扩展性较差。这就是为什么他们必须进行优化以 使每个CPU时间片(Cycle)做更多的工作
　　
　　
　　实验环境：rhel6.5 selinux and iptables disabled
　　实验主机：192.168.22.138 haproxy
　　  192.168.2.135 haproxy
　　 192.168.2.116  web1(real server)
　　 192.168.2.160  web2 (real server)
　　Virtual server 192.168.2.252
　　
　　Haproxy软件包下载地址：http://haproxy.1wt.eu/#down
　　下载包：haproxy-1.4.24.tar.gz
　　
　　Haproxy负载均衡
　　[root@server38 ~]# yum install rpm-build -y
　　
　　将tar包制作成rpm包：
　　[root@server38 ~]# rpmbuild -tb haproxy-1.4.24.tar.gz
　　error: Failed build dependencies:   #需要pcre依赖性
　　pcre-devel is needed by haproxy-1.4.24-1.x86_64
　　[root@server38 ~]# yum install pcre-devel -y
　　[root@server38 ~]# rpm -ivh /root/rpmbuild/RPMS/x86_64/haproxy-1.4.24-1.x86_64.rpm
　　Preparing...                ########################################### [100%]
　　   1:haproxy                ########################################### [100%]
　　
　　Haproxy配置文件中需要此目录，故创建：
　　[root@server38 share]# mkdir /usr/share/haproxy
　　
　　[root@server38 haproxy]# vim /etc/haproxy/haproxy.cfg
　　# this config needs haproxy-1.1.28 or haproxy-1.2.1
　　
　　global
　　log 127.0.0.1local0  #制定日志设备
　　log 127.0.0.1local1 notice #制定日志的类型，还有err,warning,debug
　　
　　#log loghostlocal0 info
　　maxconn 4096   #并发最大链接数量
　　chroot /usr/share/haproxy  #jail目录，需要手动创建
　　uid 99     
　　gid 99
　　daemon    #后台运行
　　#debug
　　#quiet
　　
　　defaults
　　logglobal
　　modehttp         #默认使用http的7层模式
　　optionhttplog      #http的日志格式
　　optiondontlognull  #禁用空链接日志
　　retries3            #重试3次失败认为服务器不可用
　　option redispatch    #当client链接到挂掉的机器时，重新分配到健康的主机
　　maxconn2000
　　contimeout5000   #链接超时
　　clitimeout50000  #客户端超时
　　srvtimeout50000  #服务器短超时
　　stats uri /status      #haproxy的监控页面
　　
　　listenwww.example.com *:80    #监听的实例名称，地址和端口
　　balanceroundrobin      #负载均衡算法
　　serverweb1 192.168.2.116:80 cookie app1inst1 check inter 2000 rise 2 fall 3
　　serverweb2 192.168.2.160:80 cookie app1inst2 check inter 2000 rise 2 fall 3
　　
　　
　　#cookie app1inst1:表示 serverid 为 app1inst1
　　#check inter 2000:检测心跳频率
　　#rise 2:表示 2 次正确认为服务器可用
　　#fall 3:表示 3 次失败认为服务器不可用
　　
　　[root@server38 haproxy]# /etc/init.d/haproxy start
　　
　　测试：
　　访问 http://192.168.2.138 测试负载
　　刷新出现页面调度则正确
　　
　　后端服务健康检查：
　　[root@server16 ~]# /etc/init.d/httpd stop
　　刷新页面，服务全部下放给了server60，没有出现错误页面则成功
　　
　　[root@server16 ~]# /etc/init.d/httpd start
　　
　　访问 haproxy 监控页面:http://192.168.2.138/status
　　
　　
　　监控页面添加认证：
　　[root@server38 ~]# vim /etc/haproxy/haproxy.cfg
　　添加：
　　listen stats *:8080
　　stats enable
　　stats uri /status
　　stats auth admin:westos
　　stats refresh 5s
　　删除或注释掉以下带#号的一行：
　　      clitimeout50000  #客户端超时
　　      srvtimeout50000  #服务器短超时
　　      #stats uri /status      #haproxy的监控页面
　　
　　添加日志：
　　[root@server38 ~]# vim /etc/rsyslog.conf
　　$ModLoad imudp
　　$UDPServerRun 514  #打开这两项，表示以UDP协议记录日志
　　#### RULES ####   #在rules中添加如下规则
　　
　　local0.*                                                /var/log/haproxy.log
　　
　　[root@server38 ~]# /etc/init.d/haproxy restart
　　[root@server38 ~]# /etc/init.d/rsyslog start
　　
　　http://192.168.2.138:8080/status  #查看界面
　　
　　
　　
　　haproxy+keepalived实现高可用
    HAProxy是高性能的代理服务器，其可以提供7层和4层代理，具有healthcheck，负载均衡等多种特性，性能卓越，包括Twitter，Reddit，StackOverflow，GitHub在内的多家知名互联网公司在使用。
     KeepAlived是一个高可用方案，通过VIP(即虚拟IP)和心跳检测来实现高可用。其原理是存在一组（两台）服务器，分别赋予Master,Backup两个角色，默认情况下Master会绑定VIP到自己的网卡上，对外提供服务。Master,Backup会在一定的时间间隔向对方发送心跳数据包来检测对方的状态，这个时间间隔一般为2秒钟，如果Backup发现Master宕机，那么Backup会发送ARP包到网关，把VIP绑定到自己的网卡，此时Backup对外提供服务，实现自动化的故障转移，当Master恢复的时候会重新接管服务。
　　
　　在主节点上：
　　[root@server38 keepalived]# vim keepalived.conf
　　! Configuration File for keepalived
　　
　　vrrp_script check_haproxy {
　　script "/etc/keepalived/check_haproxy.sh"
　　interval 2
　　weight 2
　　}
　　
　　global_defs {
　　   notification_email {
　　     root@localhost
　　   }
　　   notification_email_from keepalived@server38.example.com
　　   smtp_server 127.0.0.1
　　   smtp_connect_timeout 30
　　   router_id LVS_DEVEL
　　}
　　
　　vrrp_instance VI_1 {
　　    state MASTER
　　    interface eth0
　　    virtual_router_id 27
　　    priority 100
　　    advert_int 1
　　    authentication {
　　        auth_type PASS
　　        auth_pass 1111
　　    }
　　    virtual_ipaddress {
　　        192.168.2.252   #虚拟ip
　　    }
　　编写检测脚本：
　　[root@server38 keepalived]# vim /etc/keepalived/check_haproxy.sh
　　#!/bin/bash
　　/etc/init.d/haproxy status &> /dev/null || /etc/init.d/haproxy restart &> /dev/null
　　if [ $? -ne 0 ];
　　then
　　/etc/init.d/keepalived  stop &>/dev/null
　　fi
　　   
　　[root@server38 keepalived]# chmod +x check_haproxy.sh
　　
　　[root@server38 keepalived]# scp /etc/haproxy/haproxy.cfg 192.168.2.135:/etc/haproxy/
　　[root@server38 keepalived]# scp check_haproxy.sh 192.168.2.135:/etc/keepalived/
　　[root@server38~]#scp rpmbuild/RPMS/x86_64/haproxy-1.4.24-1.x86_64.rpm 192.168.2.135:
　　
　　在备节点上：
　　[root@server35 ~]# vim /etc/keepalived/keepalived.conf
　　! Configuration File for keepalived
　　
　　vrrp_script check_haproxy {
　　script "/etc/keepalived/check_haproxy.sh"
　　interval 2
　　weight 2
　　}
　　
　　global_defs {
　　   notification_email {
　　     root@localhost
　　   }
　　   notification_email_from keepalived@server35.example.com
　　   smtp_server 127.0.0.1
　　   smtp_connect_timeout 30
　　   router_id LVS_DEVEL
　　}
　　
　　vrrp_instance VI_1 {
　　    state BACKUP
　　    interface eth0
　　    virtual_router_id 27
　　    priority 50
　　    advert_int 1
　　    authentication {
　　        auth_type PASS
　　        auth_pass 1111
　　    }
　　    virtual_ipaddress {
　　        192.168.2.25
　　    }
　　
　　    track_script {
　　        check_haproxy
　　    }
　　}
　　
　　[root@server35 ~]# vim /etc/rsyslog.conf
　　$ModLoad imudp
　　$UDPServerRun 514  #打开这两项，表示以UDP协议记录日志
　　#### RULES ####   #在rules中添加如下规则
　　
　　local0.*                                                /var/log/haproxy.log
　　
　　[root@server35 ~]# rpm -ivh haproxy-1.4.24-1.x86_64.rpm
　　
　　[root@server35 ~]# mkdir /usr/share/haproxy/
　　
　　关闭掉所有服务：
　　[root@server38 ~]# /etc/init.d/httpd stop
　　[root@server38 ~]# /etc/init.d/haproxy stop
　　[root@server38 ~]# /etc/init.d/keepalived stop
　　[root@server35 ~]# /etc/init.d/httpd stop
　　[root@server35 ~]# /etc/init.d/haproxy stop
　　[root@server35 ~]# /etc/init.d/keepalived stop
　　
　　测试：
　　[root@server38 ~]# /etc/init.d/keepalived start
　　
　　[root@server38 ~]# ip addr show
　　1: lo:  mtu 16436 qdisc noqueue state UNKNOWN
　　    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
　　    inet 127.0.0.1/8 scope host lo
　　    inet6 ::1/128 scope host
　　       valid_lft forever preferred_lft forever
　　2: eth0:  mtu 1500 qdisc pfifo_fast state UP qlen 1000
　　    link/ether 52:54:00:61:4e:92 brd ff:ff:ff:ff:ff:ff
　　    inet 192.168.2.138/24 brd 192.168.2.255 scope global eth0
　　    inet 192.168.2.252/32 scope global eth0
　　    inet6 fe80::5054:ff:fe61:4e92/64 scope link
　　       valid_lft forever preferred_lft forever
　　
　　http://192.168.2.252
　　出现以下效果证明成功：
　　1.刷新界面变换
　　2.[root@server38 ~]# /etc/init.d/keepalived stop
　　[root@server35 ~]# ip addr show #备机主动接管
　　1: lo:  mtu 16436 qdisc noqueue state UNKNOWN
　　    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
　　    inet 127.0.0.1/8 scope host lo
　　    inet6 ::1/128 scope host
　　       valid_lft forever preferred_lft forever
　　2: eth0:  mtu 1500 qdisc pfifo_fast state UP qlen 1000
　　    link/ether 52:54:00:81:4b:62 brd ff:ff:ff:ff:ff:ff
　　    inet 192.168.2.135/24 brd 192.168.2.255 scope global eth0
　　    inet 192.168.2.252/32 scope global eth0
　　    inet6 fe80::5054:ff:fe81:4b62/64 scope link
　　       valid_lft forever preferred_lft forever
　　   刷新界面变换