nginx+upstream+keepalived实现负载均衡

yhgfds

                      IP地址规划
前端服务器
master 192.168.1.112
slave  192.168.1.113
节点服务器
       192.168.1.114

       192.168.1.115
1、开启主备服务器的upstream模块 在http模块下添加配置分发节点
    upstream aaa.xftz.cn{
        server 192.168.1.114;
        server 192.168.1.115;
                }
upstream bbb.xftz.cn{
        server 192.168.1.114;
        server 192.168.1.115;
                }

server {
        listen       80;
       server_name  aaa.xftz.cn;
  location / {
                proxy_pass      http://aaa.xftz.cn;
                proxy_next_upstream  http_500 http_502 http_503 error timeout invalid_header;
                include /home/webserver/nginx/conf/proxy.conf;
   }
}
server {
        listen  80;
       server_name  bbb.xftz.cn;
        location / {
                proxy_pass      http://bbb.xftz.cn;
                proxy_next_upstream  http_500 http_502 http_503 error timeout invalid_header;
                include /home/webserver/nginx/conf/proxy.conf;
}
                include /home/webserver/nginx/conf/proxy.conf  //include指令包含进来一个proxy配置文件
}
proxy.conf配置文件内容

proxy_redirect  off;
proxy_set_header X-Forwarded-For  $proxy_add_x_forwarded_for;
proxy_set_header X-RealIP $remote_addr;
proxy_set_header Host $host;
client_body_buffer_size 128k;
client_max_body_size    8m;
proxy_connect_timeout   30s;
proxy_send_timeout      1m;
proxy_read_timeout      1m;
proxy_temp_file_write_size 1024m;
proxy_buffer_size         32k;
proxy_buffers             4 32k;
proxy_busy_buffers_size 64k;
#proxy_set_header(设定header)
#proxy_hide_header(隐藏header)
#proxy_pass_header(通过header)
X-Forwarded-For X-RealIP 分别设置变量Forwarded-For设置的变量作用为后端服务器可以获取客户的真实访问IP通过哪个代理服务器访问的后端服务器 X-RealIP设置的变量表示后端服务器可以获取到用户的真实IP
#proxy_connect_timeout(代理连接超时)
#proxy_send_timeout(代理发送超时)
#proxy_read_timeout(代理接收超时)
#proxy_temp_file_write_size(设定缓存文件夹大小)
#proxy_buffer_size(代理缓冲大小)
#proxy_buffers (代理缓冲)
#proxy_busy_buffers_size(高负荷下缓冲大小)
#proxy_ignore_client_abort(不允许代理端主动关闭连接)
2、slave服务器113的配置与主一样

3、节点服务器114和115配置一致
server {
        listen       80;
       server_name  aaa.xftz.cn;
        access_log  /home/httpd/logs/nginx/aaa.xftz.cn-access.log  main;
        error_log   /home/httpd/logs/nginx/aaa.xftz.cn-error.log debug ;
        root /home/httpd/aaa.xftz.cn/;
       index index.html index.php;
                                 }
server {
        listen       80;
       server_name  bbb.xftz.cn;
        access_log  /home/httpd/logs/nginx/bbb.xftz.cn-access.log  main;
        error_log   /home/httpd/logs/nginx/bbb.xftz.cn-error.log debug ;
        root /home/httpd/bbb.xftz.cn/;
       index index.html index.php;
        }
在后端节点服务器的nginx配置文件里添加日志格式
log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent"  $proxy_add_x_forwarded_for "$http_x_forwarded_for"';
4、添加host文件测试访问
192.168.1.112aaa.xftz.cn
192.168.1.112bbb.xftz.cn





5、查看服务器日志


这里upstream的配置完成。


安装Keepalived
tar zxvf keepalived-1.1.19.tar.gz
cd keepalived-1.1.19
./configure --sysconf=/etc
make && make install

修改配置文件/etc/keepalived/keepalived.conf
! Configuration File for keepalived

global_defs {
   router_id LVS_DEVEL
}
vrrp_script chk_nginx {                //监控nginx脚本
                script "/etc/init.d/nginx.sh"
                interval 2
                weight 2
}
vrrp_instance VI_1 {
    state MASTER
    interface eth0
    virtual_router_id 51
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
track_script {   
    chk_nginx
}
track_interface {
     eth0
     }
    virtual_ipaddress {
        192.168.1.200
    }
}

virtual_server 192.168.1.200 80 {
    delay_loop 6
    lb_algo rr
    lb_kind DR
    nat_mask 255.255.255.0
persistence_timeout 50
    protocol TCP

    real_server 192.168.1.114 80 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
        }
    }
        real_server 192.168.1.115 80 {
        weight 1
        TCP_CHECK {
        connect_timeout 3
        nb_get_retry 3
        delay_before_retry 3
}
}
}
备服务器的配置文件和主的差别在红色部分。
创建nginx监控文件
vim /etc/init.d/nginx.sh
#!/bin/bash
netstat -anpt | grep nginx
if [ $? != 0 ]
then
/home/webserver/nginx/sbin/nginx
sleep 3
netstat -anpt | grep nginx
if [ $? != 0 ]
then
/etc/init.d/keepalived stop
fi
fi
只在主配置即可
测试keepalived 关闭nginx
到此配置完成