Tomcat+Nginx+Memcached集群部署

zzss

　　主机环境 redhat6.5 64位
　　实验环境 服务端1 ip172.25.29.1   nginx
　　服务端2 ip 172.25.29.2    tomcat+memcached
　　服务端3 ip 172.25.29.3    tomcat+memcached
　　安装包  jdk-7u79-linux-x64.tar.gz
　　apache-tomcat-7.0.37.tar.gz
　　nginx-goodies-nginx-sticky-module-ng-c78b7dd79d0d.tar.gz
　　asm-3.2.jar
　　kryo-1.04.jar
　　kryo-serializers-0.10.jar
　　memcached-session-manager-1.6.3.jar
　　memcached-session-manager-tc7-1.6.3.jar
　　minlog-1.2.jar
　　msm-kryo-serializer-1.6.3.jar
　　reflectasm-1.01.jar
　　spymemcached-2.7.3.jar
　　防火墙状态 关闭
　　
　　1.jdk安装、环境配置及测试服务端2
　　1.解压、作软链接
　　[root@server2mnt]# tar zxf jdk-7u79-linux-x64.tar.gz -C /usr/local/  #解压jdk
　　[root@server2mnt]# cd /usr/local/      #切换到解压目录
　　[root@server2local]# ls
　　bin  etc games  include  jdk1.7.0_79 lib  lib64  libexec sbin  share  src
　　[root@server2local]# ln -s jdk1.7.0_79/ java      #作软链接
　　[root@server2local]# ll
　　total44
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 bin
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 etc
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 games
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 include
　　lrwxrwxrwx.1 root root   12 Sep 24 10:50 java ->jdk1.7.0_79/    #查看
　　drwxr-xr-x.8 uucp  143 4096 Apr 11  2015 jdk1.7.0_79
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 lib
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 lib64
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 libexec
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 sbin
　　drwxr-xr-x.5 root root 4096 Aug  8 21:38 share
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 src
　　2.将jdk添加到环境变量
　　[root@server2local]# vim /etc/profile
　　79 export JAVA_HOME=/usr/local/java
　　80 exportCLASSPATH=.:$JAVA_HOME/lib:$JAVA_HOME/jre/lib
　　81 export PATH=$PATH:$JAVA_HOME/bin
　　[root@server2local]# source /etc/profile
　　3.测试
　　[root@server2local]# echo $JAVA_HOME    #测试添加环境变量是否成功
　　/usr/local/java
　　[root@server2local]# echo $CLASSPATH
　　.:/usr/local/java/lib:/usr/local/java/jre/lib
　　[root@server2local]# echo $JAVA_HOME
　　/usr/local/java
　　[root@server2local]# cd java       #测试java的环境是否配置成功
　　[root@server2java]# vim test.java    #写个简单的测试页

　　1 public>　　2        public static void main(String[] args)
　　3        {
　　4                 System.out.println("Helloworld!");
　　5        }
　　6 }
　　[root@server2java]# javac test.java    #链接生成test.class文件
　　[root@server2mnt]# java test    #执行
　　Helloworld!
　　2.tomcat的安装服务端2
　　1.解压、作软链接
　　[root@server2mnt]# tar zxf apache-tomcat-7.0.8.tar.gz -C /usr/local/  #解压
　　[root@server2mnt]# cd /usr/local/
　　[root@server2local]# ls
　　apache-tomcat-7.0.8  etc   include  jdk1.7.0_79  lib64   sbin   src
　　bin                  games  java    lib          libexec  share
　　[root@server2local]# ln -s apache-tomcat-7.0.8/ tomcat   #作软链接
　　[root@server2local]# ll
　　total48
　　drwxr-xr-x.9 root root 4096 Sep 24 11:11 apache-tomcat-7.0.8
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 bin
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 etc
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 games
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 include
　　lrwxrwxrwx.1 root root   12 Sep 24 10:50 java ->jdk1.7.0_79/
　　drwxr-xr-x.8 uucp  143 4096 Sep 24 11:02 jdk1.7.0_79
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 lib
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 lib64
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 libexec
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 sbin
　　drwxr-xr-x.5 root root 4096 Aug  8 21:38 share
　　drwxr-xr-x.2 root root 4096 Jun 28  2011 src
　　lrwxrwxrwx.1 root root   20 Sep 24 11:12 tomcat-> apache-tomcat-7.0.8/     #查看
　　[root@server2local]# cd tomcat/bin
　　[root@server2bin]# ./startup.sh     #开启tomcat
　　2.测试
　　[root@server2bin]#cd ..
　　[root@server2tomcat]# vim webapps/ROOT/test.jsp    #写测试仪页
　　1 server2-The Time is
　　#测试 172.25.29.2:8080

　　172.25.29.2:8080/test.jsp

　　在服务端3上进行同样的配置也可以用scp把服务端2上java和tomcat目录传过去如下
　　[root@server2local]# scp -r java/ tomcat/ 172.25.29.3:/usr/local/
　　在进行系统环境里加上java的配置启动tomcat即可
　　3.Nginx添加sticky  (服务端1)
　　1.nginx负载均衡已经配置好了
　　在前面的博客里已经写过nginx源码安装这里就不再重复了也可以参考前面的博客
　　[root@server1~]# cd /usr/local/lnmp/nginx/conf
　　[root@server1conf]# vim nginx.conf
　　20    upstream wen {
　　21                 server 172.25.29.2:8080;    #轮询机制
　　22                 server 172.25.29.3:8080;
　　23        }
　　49        location / {
　　50            root   html;
　　51            index  index.html index.jspindex.php index.htm;   #默认发布目录
　　52        }
　　68        location ~ \.jsp$ {
　　69            proxy_pass   http://wen;
　　70        }
　　[root@server1conf]# nginx -t    #检测
　　nginx:the configuration file /usr/local/lnmp/nginx/conf/nginx.conf syntax is ok
　　nginx:configuration file /usr/local/lnmp/nginx/conf/nginx.conf test is successful

　　[root@server1conf]# nginx -s>　　测试 172.25.29.1

　　172.25.29.1/test.jsp

　　刷新之后

　　也就是server2 和server3相互交替
　　2.改变负载均衡机制为sticky
　　由于nginx是轮询机制如果在访问页面如填写信息时突然卡住刷新之后就会跳到另一个server上就得重新开始填写。但是Nginx里有很多算法其中的ip_hash也可以防止这些问题。使用ip_hash有一个问题是当客户端和服务器之间使用cdn内容分发系统高速缓存时客户端的访问到达cdn由cdn访问服务器识别的ip是cdn的ip那么将集中于访问后台的一台服务器(x相当于DDOS***)会加速服务器的损坏。那么为了防止这些问题就有用下面的算法sticky不是nginx里自带的nginx-sticky-module为 nginx 的第三方模块,使 nginx 支持 sticky 模式,所以需要将包加入配置、重新编译、安装nginx
　　1.重新源码安装nginx添加一个模块
　　[root@server1local]# nginx -s stop      #关闭nginx
　　[root@server1mnt]# tar zxf nginx-goodies-nginx-sticky-module-ng-c78b7dd79d0d.tar.gz #解压
　　[root@server1mnt]# ls
　　nginx-1.8.1.tar.gz
　　nginx-goodies-nginx-sticky-module-ng-c78b7dd79d0d
　　nginx-goodies-nginx-sticky-module-ng-c78b7dd79d0d.tar.gz
　　[root@server1nginx-1.8.1]# make clean    #清除上一次的缓存文件
　　rm-rf Makefile objs
　　[root@server1nginx-1.10.1]# ./configure --prefix=/usr/local/lnmp/nginx   #重新配置--with-http_ssl_module--with-http_stub_status_module--add-module=/mnt/nginx-goodies-nginx-sticky-module-ng-c78b7dd79d0d
　　[root@server1nginx-1.8.1]# make     #编译、链接
　　[root@server1nginx-1.8.1]# make install   #安装
　　[root@server1nginx-1.8.1]#cd /usr/local/lnmp/nginx/conf
　　[root@server1conf]# vim nginx.conf
　　18        upstream westos{
　　19                 sticky;     #使用sticky
　　20                 server 172.25.29.2:8080;
　　21                 server 172.25.29.3:8080;
　　[root@server1local]# nginx -t   #检测nginx文件里是否有错误
　　nginx:the configuration file /usr/local/lnmp/nginx/conf/nginx.conf syntax is ok
　　nginx:configuration file /usr/local/lnmp/nginx/conf/nginx.conf test is successful
　　[root@server1local]# nginx   #启动
　　2.测试
　　测试 172.25.29.1/test.jsp

　　刷新之后结果不变还是

　　4交叉存储避免单点故障添加memcached服务端2
　　配置好之后如果一台服务器宕机了那么这台服务器正在运行的业务将直接结束正在存储的数据丢失。为了防止这些问题Tomcat1将session存储到Tomcat2的memcached中当Tomcat2的memcached不可用时Tomcat1将session存储到自己的memcached上Tomcat2则正好相反。使用这种配置就避免了单点故障。
　　1.安装、开启memcached、写测试页
　　[root@server2ROOT]# yum install -y memcached      #安装memcached
　　[root@server2ROOT]# /etc/init.d/memcached start      #开启memcached
　　Startingmemcached:                                        [  OK  ]
　　[root@server2tomcat]# bin/shutdown.sh   #关闭Tomcat
　　[root@server2ROOT]# vim test.jsp    #写一个jsp的测试页面
　　1
　　2
　　3Cluster AppTest
　　4
　　5 Server Info:
　　6
　　8