apache+tomcat集群、负载均衡

ter2w

在开发测试环境中，可能硬件资源不够情况下，要怎么实现集群呢，以下就举一例：

环境：

win7

工具：

• apache 一枚
  
• tomcat 两枚 分别命名为tomcat1、tomcat2
  
• mod_jk 一枚（尽量和apache同一个版本）
  
  

一路安装，mod_jk不是安装的.这个文件要拷贝到Apache目录的modules目录里面。

配置Tomcat集群
打开tomcat下conf/server.xml文件，找到<Engine name="Catalina" defaultHost="localhost">，增加jvmRoute属性，以支持AJP负载均衡。
tomcat1改为<Engine name="Catalina" defaultHost="localhost" jvmRoute="jvm">
tomcat2改为<Engine name="Catalina" defaultHost="localhost" jvmRoute="jvm1">
因为我们的两个Tomcat在是一台机器上运行，所以我们有必要修改其中一个Tomcat采用端口，以保证两个同时运行时不会产生冲突(当然，如果两个tomcat不在一台机器上运行，那么这个步骤就可以省略)。我们这里修改的是tomcat2,打开tomcat2下conf/server.xml文件，修改如下：
<Server port="8005" shutdown="SHUTDOWN">
修改为
<Server port="9005" shutdown="SHUTDOWN">
<Connector port="8080" protocol="HTTP/1.1"  connectionTimeout="20000" redirectPort="8443" />
修改为
<Connector port="9080" protocol="HTTP/1.1"     connectionTimeout="20000"  redirectPort="9443" />。
<Connector port="8009" protocol="AJP/1.3" redirectPort="8443" />
修改为
<Connector port="9009" protocol="AJP/1.3" redirectPort="9443" />
端口修改完成，我们需要来配置一个集群环境中的session复制，打开tomcat下conf/server.xml文件，在<Engine></Engine>节点内加入（tomcat5貌似有以下的属性但被注释了，tomcat6开始就没有了所有这里要加入）下面代码：
  <Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"
                 channelSendOptions="6">

          <Manager className="org.apache.catalina.ha.session.BackupManager"
                   expireSessionsOnShutdown="false"
                   notifyListenersOnReplication="true"
                   mapSendOptions="6"/>
          <!--
          <Manager className="org.apache.catalina.ha.session.DeltaManager"
                   expireSessionsOnShutdown="false"
                   notifyListenersOnReplication="true"/>
          -->
          <Channel className="org.apache.catalina.tribes.group.GroupChannel">
            <Membership className="org.apache.catalina.tribes.membership.McastService"
                        address="228.0.0.4"
                        port="45564"
                        frequency="500"
                        dropTime="3000"/>
            <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"
                      address="auto"
                      port="4001"
                      selectorTimeout="100"
                      maxThreads="6"/>

            <Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter">
              <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/>
            </Sender>
            <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/>
            <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/>
            <Interceptor className="org.apache.catalina.tribes.group.interceptors.ThroughputInterceptor"/>
          </Channel>

          <Valve className="org.apache.catalina.ha.tcp.ReplicationValve"
                 filter=".*\.gif|.*\.js|.*\.jpeg|.*\.jpg|.*\.png|.*\.htm|.*\.html|.*\.css|.*\.txt"/>

          <Deployer className="org.apache.catalina.ha.deploy.FarmWarDeployer"
                    tempDir="/tmp/war-temp/"
                    deployDir="/tmp/war-deploy/"
                    watchDir="/tmp/war-listen/"
                    watchEnabled="false"/>

          <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/>
</Cluster>
其中同台机器上的TCP端口不能有冲突，所以在上面的配置当中，对于Tomcat2需要修改节点Culster->Channel->Reciver的port属性，tomcat1中用了4001,那这里把tomcat2的这个port属性修改为4002。
这些配置都完成后，接下来我们就可以在这两个Tomcat当中添加一个简单应用来实际测试一下集群效果。
测试Tomcat集群
在tomcat/webapps下，新建一文件夹为test，test文件夹下创建WEB-INF目录，创建标准web.xml文件，文件中一定要加入<distributable/>标签以支持分布式应用。
web.xml文件内容如下：
<?xml version="1.0" encoding="ISO-8859-1"?>
<web-app xmlns="http://java.sun.com/xml/ns/javaee"   xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"   xsi:schemaLocation="http://java.sun.com/xml/ns/javaee                       http://java.sun.com/xml/ns/javaee/web-app_3_0.xsd"   version="3.0"   metadata-complete="true">
    <display-name>Welcome to Test Tomcat6 Cluster</display-name>   
    <description>Welcome to Test Tomcat6 Cluster</description>
    <distributable/>
</web-app>
在test文件夹下建立test.jsp文件，文件内容如下：
<%@ page contentType="text/html; charset=UTF-8" %>
<%@ page import="java.util.*" %>
<html><head><title>Cluster App Test</title></head>
<body>
Server Info:
<%
out.println(request.getLocalAddr() + " : " + request.getLocalPort()+"<br>");%>
<%
  out.println("<br> ID " + session.getId()+"<br>");
  // 如果有新的 Session 属性设置
  String dataName = request.getParameter("dataName");
  if (dataName != null && dataName.length() > 0) {
     String dataValue = request.getParameter("dataValue");
     session.setAttribute(dataName, dataValue);
  }
  out.println("<b>Session 列表</b><br>");
  System.out.println("============================");
  Enumeration e = session.getAttributeNames();
  while (e.hasMoreElements()) {
     String name = (String)e.nextElement();
     String value = session.getAttribute(name).toString();
     out.println( name + " = " + value+"<br>");
         System.out.println( name + " = " + value);
   }
%>
  <form action="test.jsp" method="POST">
    名称:<input type=text size=20 name="dataName">
     <br>
    值:<input type=text size=20 name="dataValue">
     <br>
    <input type=submit>
   </form>
</body>
</html>
这个简单的JSP可以把提交的值保存到Session当中，同时显示出来。
启动tomcat1,等tomcat1启动完成后，启动tomcat2。先访问tomcat1对应的test工程http://localhost:8080/test/test.jsp页面，输入值并提交，然后把链接转到tomcat2对应的test工程http://localhost:9080/test/test.jsp页面，看看session内容是否相同，如果相同则说明session复制成功，也就是群集成功。
接下来我们在这两个Tomcat前端添加一个Apache Http Server，所有访问请求通过这个Http Server进行转发，根据tomcat1或2的忙碌情况决定转发给tomcat1或者是tomcat2去处理用户请求。

负载均衡配置

1.在与http.conf文件同目录建立 workers.properties文件内容如下:

#下面是分发控制器 注意不要放tomcat实例.如果只是负载不集群的话.这里要把tomcat实例放上来.以逗号隔开
worker.list = loadbalancer  #server 列表 要与http.conf文件中蓝色字体一致貌似 #Tomcat1实例配置 这里要和Tomcat配置文件Service.xml的jvmRoute保持一致
worker.jvm.host=localhost
worker.jvm.port=8009
worker.tomjvmcat1.type=ajp13
#分发权重 值越大负载越大
worker.jvm.lbfactor = 1

#Tomcat2实例配置
worker.jvm1.host=localhost
worker.tomjvm1cat2.port=9009
worker.tomjvm1cat2.type=ajp13
#分发权重 值越大负载越大
worker.jvm1.lbfactor = 1

#负载均衡分发控制器 有session复制
worker.loadbalancer.type=lb
worker.loadbalancer.balance_workers=jvm,jvm1 #这里在的jvm、jvm1为需要与上边tomcat设置的别名一致worker.loadbalancer.sticky_session=true #如果是只追求速度.可以设成false
worker.loadbalancer.sticky_session_force=true #如果是只追求速度.可以设成false

2:修改Apache根目录下的conf下的http.conf文件,再该文件末尾加入以下代码

#以下为tomcat集成配置部分
#加载mod_jk Module,红色部分要与你下载并复制到modules目录下的文件名保持一致
LoadModule jk_module modules/mod_jk-1.2.28-httpd-2.2.3.so

#指定 workers.properties文件路径,红色部分是接下来要在与http.conf文件同目录的文件名
JkWorkersFile conf/workers.properties

# Where to put jk logs
JkLogFile logs/mod_jk.log

# Set the jk log level [debug/error/info]
JkLogLevel info

# Select the log format
JkLogStampFormat "[%a %b %d %H:%M:%S %Y] "

# JkOptions indicate to send SSL KEY SIZE,
JkOptions +ForwardKeySize +ForwardURICompat -ForwardDirectories

# JkRequestLogFormat set the request format
JkRequestLogFormat "%w %V %T"

#指定那些请求交给tomcat处理,"loadbalancer "为在workers.propertise里指定的负载分配控制器_JkMount /* loadbalancer

#这里应该注意一下.红色部分地址要放入发布项目所需要的资源文件.like some photos and js and css...等.项目结构必须一样.
DocumentRoot "D:\Program Files (x86)\Apache Software Foundation\Apache2.2\htdocs "

JkMount /*.jsp loadbalancer
JkMount /*.do loadbalancer
JkMount /servlet/* loadbalancer
#关掉主机Lookup，如果为on，很影响性能，可以有10多秒钟的延迟。
HostnameLookups Off

最后分别启动tomcat和apache服务，然后在地址栏中输入http://localhos/test/test.jsp，输入并提交，可以看到在一个tomcat控制台上输出，然后关掉一个有打印的tomcat，地址依然有效，只是打印的信息出现在了另一个tomcat上。