nginx+keepalived+tomcat之具体配置档
前沿知识点：[*] nginx负责负载均衡（反向代理）
[*] msm（memcached session manager）负责缓存会话信息，从而实现会话保持
所需包：
[*] nginx和memcached采用最新稳定版
[*] tomcat版本需要与msm版本一致，这里采用tomcat7
[*] msm包共计9个包，包名具体信息查看附件，msm的所有包放到$CATALINA_HOME/lib
配置过程：
nginx的配置信息如下-->
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
...
http {
...
upstream tomcat {
server node1:8080;
server node2:8080;
#这里具体使用什么算法，暂定，不过我觉得ip_hash不好，会造成负载不均衡
}
server {
...
location ~* ^/testapp {
proxy_pass http://tomcat;
proxy_redirect off;
proxy_set_header X-real-ip $remote_addr;
proxy_set_header X-forwarded-for $proxy_add_x_forwarded_for;
proxy_set_header Host $host;
}
...
}
}
tomcat的配置信息如下-->
首先修改server.xml，在默认的host flag中添加context
1
2
3
4
5
6
7
8
9
10
11
12
13
...
<host>
...
<context path="/testapp" docbase="testapp/" />
...
</host>
...
其次修改context.xml，在默认的context flag中添加manager
其中粘性session方式如下： Sticky 模式：tomcat 本地容器 session 为主session， memcached为备session。Request请求到来时， 判断tomcat容器是否发生变化,若变化(即原tomcat down掉),则从memcached加载备session到tomcat2,响应给客户端,请求结束后,重置session_id,并更新到memcached。
1
2
3
4
5
6
7
8
9
<Context>
...
<Manager className="de.javakaffee.web.msm.MemcachedBackupSessionManager"
memcachedNodes="n1:host1.yourdomain.com:11211,n2:host2.yourdomain.com:11211"
failoverNodes="n1"
requestUriIgnorePattern=".*\.(ico|png|gif|jpg|css|js)$"
transcoderFactoryClass="de.javakaffee.web.msm.serializer.kryo.KryoTranscoderFactory"
/>
</Context>
非粘性session如下： Non-Sticky模式：tomcat session 为 中转session， memcached1 为主,memcached 2 为备session。Request请求到来时，从memcached 2加载备 session 到 tomcat，（另外,若只有一个memcached节点，或者memcached2 出错时,且tomcat本地容器中还没有session,则从memcached1加载主 session 到 tomcat），Request请求结束时，将tomcat session更新至 主memcached1和备memcached2，并且清除tomcat session 。以达到主备同步之目的，如下是non-sticky模式的响应流程图：（图片来源网络）。
此模式下,基于session的验证码将无法使用,因为此模式下,第一次session是用本地,然后存放到mem1和mem2中,之后客户再次请求,则路由到了另外一台tomcat上,又因为是同一个session_id,所以使用的是mem1中,但是mem1中确是旧的session.(但是验证码要求每一次都不一样...)
1
2
3
4
5
6
7
8
9
10
11
<Context>
...
<ManagerclassName="de.javakaffee.web.msm.MemcachedBackupSessionManager"
memcachedNodes="n1:host1.yourdomain.com:11211,n2:host2.yourdomain.com:11211"
sticky="false"
sessionBackupAsync="false"
lockingMode="uriPattern:/path1|/path2"
requestUriIgnorePattern=".*\.(ico|png|gif|jpg|css|js)$"
transcoderFactoryClass="de.javakaffee.web.msm.serializer.kryo.KryoTranscoderFactory"
/>
</Context>
keepalived配置信息如下-->这里只贴出主的,从的就不贴了
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
! Configuration File for keepalived
global_defs {
notification_email {
acassen@firewall.loc
failover@firewall.loc
sysadmin@firewall.loc
}
notification_email_from Alexandre.Cassen@firewall.loc
smtp_server 127.0.0.1
smtp_connect_timeout 30
router_id LVS_DEVEL
}
#<Spinestars
vrrp_script chk_keepalived_down {
script "[ -f /var/run/keepaliveddown ] && exit 1 || exit 0"
interval 2
weight -2
}
#nginx_check_script
vrrp_script chk_nginx {
script "killall -0 nginx && exit 0 || exit 1"
interval 2
weight -2
}
#/Spinestars>
vrrp_instance VI_1 {
state MASTER
interface eth1
virtual_router_id 20
mcast_src_ip 192.168.100.1
priority 100
advert_int 1
authentication {
auth_type PASS
auth_pass 1111
}
virtual_ipaddress {
10.88.100.2
}
track_script {
chk_nginx
chk_keepalived_down
}
}
nginx动静分离配置:
...
#<Spinestars
upstream tomcat_servers {
server node1:8080;
server node2:8080;
}
server {
listen *:80;
server_nametest.shop.com;
root/var/www/shop;
index index.html index.jsp index.htm;
#/Spinestars>
#<Spinestars
location ~* \.(html|jpg|png|jpeg|css|gif|ico)$ {
root /var/www;
}
location ~* \.(js|jhtml)$ {
proxy_pass http://tomcat_servers;
proxy_redirect off;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
}
if ( $host = 'test.shop.com' ){
rewrite ^/$ http://test.shop.com/shop permanent;
}
#以下location是测试用的
location ~* ^/testapp {
proxy_pass http://tomcat_servers;
proxy_redirect off;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header Host $host;
proxy_set_header X-Real-IP $remote_addr;
}
#/Spinestars>
...
}
来自为知笔记(Wiz)
附件列表
[*]memcached+msm+kryo.png
页:
[1]