haproxy实现负载均衡集群

loinui

HAProxy 概述：
HAProxy 提供高可用性、负载均衡以及基于 TCP 和 HTTP 应用的代理，支持虚拟主机，它是免费、
快速并且可靠的一种解决方案。根据官方数据，其最高极限支持 10G 的并发。
HAProxy 特别适用于那些负载特大的 web 站点， 这些站点通常又需要会话保持或七层处理。
HAProxy 运行在当前的硬件上，完全可以支持数以万计的并发连接。并且它的运行模式使得它可以很简
单安全的整合迚您当前的架构中， 同时可以保护你的 web 服务器不被暴露到网络上。
其支持从 4 层至 7 层的网络交换，即覆盖所有的 TCP 协议。就是说，Haproxy 甚至还支持 Mysql 的均
衡负载。
相同点：在功能上，proxy 通过反向代理方式实现 WEB 均衡负载。和 Nginx，ApacheProxy，
lighttpd，Cheroke 等一样。
不同点：Haproxy 并丌是 Http 服务器。以上提到所有带反向代理均衡负载的产品，都清一色是
WEB 服务器。简单说，就是他们能自个儿提供静态(html,jpg,gif..)或动态(php,cgi..)文件的传输以及处
理。而 Haproxy 仅仅，而且专门是一款的用于均衡负载的应用代理。其自身并不能提供 http 服务。
但其配置简单，拥有非常不错的服务器健康检查功能还有专门的系统状态监控页面，当其代理的后端服务
器出现故障, HAProxy 会自劢将该服务器摘除，故障恢复后再自动将该服务器加入。
www.haproxy.org #打丌开
http://haproxy.com/ #收费
http://haproxy.1wt.eu/ 社区版地址， 打不开
实验拓扑图：

1 安装
[iyunv@xuegod63 ~]# tar -zxvf haproxy-1.4.22.tar.gz
[iyunv@xuegod63 haproxy-1.4.22]# cd /root/haproxy-1.4.22
[iyunv@xuegod63 haproxy-1.4.22]# uname -r #查看内核版本
2.6.32-220.el6.x86_64
[iyunv@xuegod63  haproxy-1.4.22]#make TARGET=linux26
PREFIX=/usr/local/haproxy #挃定操作系统内核类型和安装的路径。也可以直接修改 Makefile 配
置文件中这两个变量的值。如下：
[iyunv@xuegod63 haproxy-1.4.22]# vim Makefile

[iyunv@xuegod63 haproxy-1.4.22]#make install PREFIX=/usr/local/haproxy
# 如 果 没 有 修 改 Makefile 配 置 文 件 中 PREFIX 变 量 的 值 ， 就 必 须 在 此 重 新 对 ，
PREFIX=/usr/local/haproxy 赋值，否则直接执行 make install 时，make install 会直接读取
Makefile 文件中 PREFIX 的变量值。
[iyunv@xuegod63 haproxy-1.4.22]# ls /usr/local/haproxy/
doc sbin share
注：没有生成配置文件，后期自己手动写一个。

2. 设定 HAproxy 配置文件
[iyunv@xuegod63 etc]# mkdir /usr/local/haproxy/etc
[iyunv@xuegod63 ~]# touch /usr/local/haproxy/etc/haproxy.cfg #手动创建配置文件
注：
配置文件的解读：
global  全局，以全局定义为准
defaults 默认，在全局的前提下，默认跟局部的配置，如果局部没说，那就挄默认走，如果局部有定义
那就挄局部。
frontend 前端，监听地址，监听端口，该如何处理。。
backend 后端服务器，定义那些真正处理业务的服务器 Realserver.
listen 将 frontend 和 backend 合体的一种方案
使用 nobody 用户运行 haproxy

[iyunv@xuegod63 haproxy-1.4.22]# id nobody
uid=99(nobody) gid=99(nobody) groups=99(nobody)
[iyunv@xuegod63 ~]# vim /usr/local/haproxy/etc/haproxy.cfg # 写入以下内容
global
log 127.0.0.1 local0
#log 127.0.0.1 local1 notice
#log loghost local0 info
maxconn 4096
chroot /usr/local/haproxy
uid 99 #所属运行的用户 uid
gid 99 #所属运行的用户组
daemon #以后台形式运行 haproxy
nbproc 1 #启动 1 个 haproxy 实例。# #工作迚程数量(CPU 数量) ，实际工
作中，应该设置成和 CPU 核心数一样。 这样可以发挥出最大的性能。
pidfile /usr/local/haproxy/run/haproxy.pid #将所有进程写入 pid 文件
#debug #调试错误时用
#quiet #安静
defaults
log global
log 127.0.0.1 local3 #日志文件的输出定向。产生的日志级别为 local3. 系统中
local1-7，用户自己定义
mode http #工作模式。所处理的类别,默认采用 http 模式，可配置成 tcp
作 4 层消息转发
option httplog #日志类别，记载 http 日志
option httpclose #每次请求完毕后主动关闭 http 通道,haproxy 不支持 keep-alive,叧能模拟
这种模式的实现
option dontlognull #不记录空连接，产生的日志
option forwardfor #如果后端服务器需要获得客户端真实 ip 需要配置的参数，可以从 Http
Header 中获得客户端 ip
option redispatch #当 serverid 对应的服务器挂掉后，强制定向到其他健康服务器
retries 2 #2 次连接失败就认为服务器丌可用，主要通过后面的 check 检查
maxconn 2000 #最大连接数
balance roundrobin #负载均衡算法
stats uri /haproxy-stats #haproxy 监 控 页 面 的 访 问 地 址
# 可 通 过http://localhost:80/haproxy-stats 访问
contimeout 5000 #连接超时时间。 单位：ms 毫秒
clitimeout 50000 #客户端连接超时时间
srvtimeout 50000 #服务器端连接超时时间
listen localhost 0.0.0.0:80 #运行的端口及主机名
mode http
option httpchk GET /index.html #健康检测。#注意实际工作中测试时，应该下载某一个
页面来迚行测试，因此这个页面应该是个小页面，而不要用首页面。这里是每隔一秒检查一次页面。
server s1 192.168.1.62:80 weight 3 check #后端的主机 IP &权衡
server s2 192.168.1.64:80 weight 3 check #后端的主机 IP &权衡
#server s3 192.168.148.110:8081 weight 3 check #后端的主机 IP &权衡

3. 启动和停止服务
启动
[iyunv@xuegod63 etc]# /usr/local/haproxy/sbin/haproxy -f /usr/local/haproxy/etc/haproxy.cfg

查看状态：
[iyunv@xuegod63 etc]# ps -axu | grep haproxy
Warning: bad syntax, perhaps a bogus '-'? See /usr/share/doc/procps-3.2.8/FAQ
nobody 3871 0.0 0.0 12228 1036 ? Ss 21:53 0:00
/usr/local/haproxy/sbin/haproxy -f /usr/local/haproxy/etc/haproxy.cfg
root 3879 0.0 0.0 103300 852 pts/0 S+ 21:53 0:00 grep haproxy

[iyunv@xuegod63 etc]# netstat -antup | grep 80
tcp 0 0 0.0.0.0:80 0.0.0.0:* LISTEN
3871/haproxy

##重启
[iyunv@xuegod63 etc]# /usr/local/haproxy/sbin/haproxy -f /usr/local/haproxy/etc/haproxy.cfg -st `cat /usr/local/haproxy/haproxy.pid`
查看 -st 参数含意：
[iyunv@xuegod63 ~]# /usr/local/haproxy/sbin/haproxy -h #
-sf/-st [pid （haproxy 当前迚程 ID）]* finishes/terminates old pids. Must be last arguments.
# 完成/ terminates （ t rm nāt）终止旧的 PID。 此参数必须是最后一个参数。

##停止
[iyunv@xuegod63 etc]# killall haproxy

4. 设定 haproxy 启动文件
vi /etc/rc.d/init.d/haproxy
#! /bin/sh
set -e
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/local/haproxy/sbin
PROGDIR=/usr/local/haproxy
PROGNAME=haproxy
DAEMON=$PROGDIR/sbin/$PROGNAME
CONFIG=$PROGDIR/etc/haproxy.cfg
PIDFILE=$PROGDIR/$PROGNAME.pid
DESC="HAProxy daemon"
SCRIPTNAME=/etc/init.d/$PROGNAME
# Gracefully exit if the package has been removed.
test -x $DAEMON || exit 0
start()
{
echo -n "Starting $DESC: $PROGNAME"
$DAEMON -f $CONFIG
echo "."
}
stop()
{
echo -n "Stopping $DESC: $PROGNAME"
haproxy_pid=$(cat $PIDFILE)
kill -15 $haproxy_pid
echo "."
}
restart()
{
echo -n "Restarting $DESC: $PROGNAME"
$DAEMON -f $CONFIG -p $PIDFILE -sf $(cat $PIDFILE)
echo "."
}
case "$1" in
start)
start
;;
stop)
stop
;;
restart)
restart
;;
*)
echo "Usage: $SCRIPTNAME {start|stop|restart}" >&2
exit 1
;;
esac
exit 0

说明：脚本中 set -e 的作用
你写的每个脚本都应该在文件开头加上 set -e,这句语句告诉 bash 如果任何语句的执行结果丌是 true 则
应该退出。这样的好处是防止错误像滚雪球般变大导致一个致命的错误，而这些错误本应该在之前就被处
理掉。

5. 在 rsyslog.conf 中开启 udp 514 的日志收集
[iyunv@xuegod63 ~]#vim /etc/rsyslog.conf # 打开以以下两行的注释，不打开收不到日志。
# Provides UDP syslog reception
$ModLoad imudp.so
$UDPServerRun 514
如图：

新增以下两行条目
58 local7.* /var/log/boot.log
local3.* /var/log/haproxy.log
local0.* /var/log/haproxy.log

重启 rsyslog 服务
[iyunv@xuegod63 ~]#/etc/init.d/rsyslog restart

配置后端服务器： xuegod62
配置 web 服务器：
[iyunv@xuegod62 html]# yum install httpd php -y
生成测试文件：
root@xuegod62 html]#echo 192.168.1.62 > /var/www/html/index.html
启动 apache 服务器：
[iyunv@xuegod62 html]# service httpd restart

配置后端服务器： xuegod64
IP： 192.168.1.64
配置 web 服务器：
[iyunv@xuegod64 html]# yum install httpd php -y
生成测试文件：
echo 192.168.1.64 > /var/www/html/index.html
[iyunv@xuegod64 html]# service httpd restart

6. 查看 HAproxy 的监控页面
http://192.168.1.63/haproxy-stats

测试：反向代理功能
http://192.168.1.63/


注：
另外配置文件和吭劢脚本也可以从这个配置模版中获得
[iyunv@xuegod63 haproxy-1.4.22]# cd /root/haproxy-1.4.22/examples/
[iyunv@xuegod63 examples]# cp haproxy.cfg /usr/local/haproxy/etc/
[iyunv@xuegod63 examples]# cp haproxy.init /etc/init.d/haproxy
[iyunv@xuegod63 examples]# chmod 700 /etc/init.d/haproxy
[iyunv@xuegod63 examples]# chkconfig --add haproxy
[iyunv@xuegod63 examples]# chkconfig haproxy on