nginx+tomcat实现负载均衡，session同步

hyilk

一、规划
    规划

系统	IP	服务	hostname
Centos 6.5 x86_64	172.16.12.1	nginx	web
Centos 6.5 x86_64	172.16.12.101	tomcat	tomcat1
Centos 6.5 x86_64	172.16.12.102	tomcat	tomcat2

二、负载均衡实现过程
   1、nginx配置如下   

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28

[iyunv@nginx ~]# grep -v "#" /etc/nginx/nginx.conf | grep -v ^$ worker_processes  1; events {     worker_connections  1024; } http {     include       mime.types;     default_type  application/octet-stream;     sendfile        on;     keepalive_timeout  65;     upstream jsp_server {    //定义后端集群tomcat     server 172.16.12.101:8080; }   server 172.16.12.102:800; }     server {         listen       80;          location / {    //默认转发至tomcat集群                   proxy_pass http://jsp_server;                       }          location ~* (.jsp|do)$ {            proxy_pass http://jsp_server;     }         error_page   500 502 503 504  /50x.html;         location = /50x.html {             root   html;         }     } }

   2、tomcat1和tomcat2上分别编辑server.xml配置文件，添加一个host和context

1 2 3 4 5

[iyunv@tomcat1 ~]# vim  /usr/local/tomcat/conf/server.xml <host name="www.test.com" appbase="/www/webapps"            unpackWARs="true" autoDeploy="true">

   3、建立index.jsp

    ①、tomcat1上

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19

[iyunv@tomcat1 ROOT]# vim /www/webapps/index.jsp <%@  page language="java" %>   test.node1       test.node1.org         <% session.setAttribute("test.org","test.org"); %> Session ID <%= session.getId() %> Created on <%= session.getCreationTime() %>

     测试：

   

        ②、tomcat2上

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19

[iyunv@tomcat2 ROOT]# vim /www/webapps/index.jsp <%@  page language="java" %>   test.node2       test.node2.org         <% session.setAttribute("test.org","test.org"); %> Session ID <%= session.getId() %> Created on <%= session.getCreationTime() %>

    测试：

   


三、实现session会话同步（DeltaManager方式）
    tomcat会话管理
    会话分类
    标准会话管理器和持久会话管理器
    标准会话管理器(StandardManager)

1 2	<manager classname="org.apache.catalina.session.StandardManager"                  maxInactiveInterval="7200"/>

    默认保存于$CATALINA_HOME/work/Catalina///下的SESSIONS.ser文件中。

1 2 3

maxActiveSessions：最多允许的活动会话数量，默认为-1，表示不限制； maxInactiveInterval：非活动的会话超时时长，默认为60s； pathname：会话文件的保存目录；  持久会话管理器(PersistentManager)：将会话数据保存至持久存储中，并且能在服务器意外中止后重新启动时重新加载这些会话信息。持久会话管理器支持将会话保存至文件存储(FileStore)或JDBC存储(JDBCStore)中。

    保存至文件中的示例  

1 2 3 4 5

<manager classname="org.apache.catalina.session.PersistentManager"           saveOnRestart="true">           <store classname="org.apache.catalina.session.FileStore"             directory="/data/tomcat-sessions"/>

每个用户的会话会被保存至directory指定的目录中的文件中，文件名为.session，并通过后台线程每隔一段时间(checkInterval参数定义，默认为60秒)检查一次超时会话。  
    保存至JDBCStore中的示例  

1 2 3 4 5 6

<manager classname="org.apache.catalina.session.PersistentManager"           saveOnRestart="true">           <store classname="org.apache.catalina.session.JDBCStore"             driverName="com.mysql.jdbc.Driver"             connectionURL="jdbc:mysql://localhost:3306/mydb?user=jb;password=pw"/>

Manger对象用于实现HTTP会话管理的功能，Tomcat6中有4种Manger的实现：

1 2 3 4

StandardManagerTomcat7的默认会话管理器，用于非集群环境中对单个处于运行状态的Tomcat实例会话进行管理。当Tomcat关闭时，这些会话相关的数据会被写入磁盘上的一个名叫SESSION.ser的文件，并在Tomcat下次启动时读取此文件。 PersistentManager当一个会话长时间处于空闲状态时会被写入到swap会话对象，这对于内存资源比较吃紧的应用环境来说比较有用。 DeltaManager用于Tomcat集群的会话管理器，它通过将改变了的会话数据同步给集群中的其它节点实现会话复制。这种实现会将所有会话的改变同步给集群中的每一个节点，也是在集群环境中用得最多的一种实现方式。 BackupManager用于Tomcat集群的会话管理器，与DeltaManager不同的是，某节点会话的改变只会同步给集群中的另一个而非所有节点。

    注 ：
负载均衡，且实现会话绑定要注意给每个tomcat实例的egine容器一个jvmRoute属性！此名称要跟前端调度模块使用名称保持一致！另外，在mod_proxy实现负载均衡的会话绑定时，还要使用sticksession=JSESSIONID（字符要大写）！

    1、分别编辑tomcat1和tomcat2下conf中server.xml
    tomcat1上：

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26

[iyunv@tomcat1 conf]# vim /usr/local/tomcat/conf/server.xml //修改如下一行内容 //然后在Engine行下添加如下内容         <manager classname="org.apache.catalina.ha.session.DeltaManager"     expireSessionsOnShutdown="false"     notifyListenersOnReplication="true"/>         <membership classname="org.apache.catalina.tribes.membership.McastService"     address="228.0.12.8" port="45564" frequency="500" dropTime="3000"/>     <receiver classname="org.apache.catalina.tribes.transport.nio.NioReceiver"     address="172.16.12.101" port="4000" autoBind="100" selectorTimeout="5000" maxThreads="6"/>         [tr]                             <deployer classname="org.apache.catalina.ha.deploy.FarmWarDeployer" tempdir="/tmp/war-temp/"     deployDir="/tmp/war-deploy/" watchDir="/tmp/war-listen/" watchEnabled="false"/>

    tomcat2上：（只有ipadress和tomcat1上不一样）

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26

[iyunv@tomcat2 ~]# vim /usr/local/tomcat/conf/server.xml //修改如下一行内容 //添加 <manager classname="org.apache.catalina.ha.session.DeltaManager" expireSessionsOnShutdown="false" notifyListenersOnReplication="true"/> <membership classname="org.apache.catalina.tribes.membership.McastService" address="228.0.12.8" port="45564" frequency="500" dropTime="3000"/> <receiver classname="org.apache.catalina.tribes.transport.nio.NioReceiver" address="172.16.12.102" port="4000" autoBind="100" selectorTimeout="5000" maxThreads="6"/> [tr] <deployer classname="org.apache.catalina.ha.deploy.FarmWarDeployer" tempdir="/tmp/war-temp/" deployDir="/tmp/war-deploy/" watchDir="/tmp/war-listen/" watchEnabled="false"/>

    2、将conf/web.xml复制一份到发布的站点目录WEB-INF下，在前面加入以下这句话
    tomcat1上：拷贝

1 2 3 4 5 6

[iyunv@tomcat1 ~]# cd /usr/local/tomcat/ [iyunv@tomcat1 conf]# cp conf/web.xml ../www/webapps/WEB-INF [iyunv@tomcat1 conf]# vim /www/webapps/WEB-INF/web.xml // 添加组播路由： [iyunv@tomcat1 tomcat]# route add -net 228.0.12.8 netmask 255.255.255.255 dev eth0

    tomcat2上：拷贝   

1 2 3 4 5 6

[iyunv@tomcat1 ~]# cd /usr/local/tomcat/ [iyunv@tomcat1 conf]# cp conf/web.xml ../www/webapps/WEB-INF [iyunv@tomcat1 conf]# vim /www/webapps/WEB-INF/web.xml // 添加组播路由： [iyunv@tomcat2 ~]# route add -net 228.0.12.8 netmask 255.255.255.255 dev eth0

    3、测试