redhatAS4.2 安装集群LVS

lb20309

redhatAS4.2 安装集群LVS　　create in 20060812 by ghbspecial
　　环境描述：本文在配置LVS时使用三台linux，一台做Directorserver(192.168.0.25) ,两台做 realserver(192.168.0.127 192.168.0.128),在配置lvs heartbeat时又添加了一台 (192.168.0.126)做为备份主节点,虚拟VIP:192.168.0.100
　　软件列表：
　　ipvsadm-1.24.tar.gz
　　libnet.tar 下载地址：http://www.packetfactory.net/libnet/ 稳定版本是：1.1.2.1
　　e2fsprogs 能够用rpm 安装光盘
　　heartbeat-2.0.2.tar.gz
　　2.6内核已集成IPVS内核补订了，所以不再需要重新编译内核.
　　配置此集群分以下几种情况
　　一、配置基于DR模式Lvs集群
　　二、配置基于隧道模式Lvs集群
　　三、配置基于高可用Lvs heartbeat
　　四、此种配置方式能够加强LVS的主节点的高安全性前提下（主节点简称DR，备份主节点DRbak），考虑充分利用资源能够将DRbak做为realserver
　　一、配置基于DR模式Lvs集群
　　1、下载ipvsadm管理程式
　　http://www.linuxvirtualserver.org/software/
　　注意对应自己的内核版本
　　ipvsadm-1.24.tar.gz
　　tar zxvf ipvsadm-1.24.tar.gz
　　cd ipvsadm-1.24
　　make && make install
　　注意在make时可能会出现很多错误的信息，请按照如下操作就能够心编译正常
　　ln -s /usr/src/kernels/2.6.9-22.EL-i686/ /usr/src/linux
　　cd ipvsadm-1.24
　　make && make install
　　2、配置VIP脚本
　　[root@ns ~]#more /etc/init.d/lvsDR
　　#!/bin/sh
　　#create in 20060812 by ghb
　　# description: start LVS of Directorserver
　　VIP=192.168.0.100
　　RIP1=192.168.0.127
　　RIP2=192.168.0.128
　　#RIPn=192.168.0.128~254
　　GW=192.168.0.1
　　. /etc/rc.d/init.d/functions
　　case "$1" in
　　start)
　　echo " start LVS of DirectorServer"
　　# set the Virtual IP Address
　　/sbin/ifconfig eth0:0 $VIP broadcast $VIP netmask 255.255.255.255 up
　　/sbin/route add -host $VIP dev eth0:0
　　#Clear IPVS table
　　/sbin/ipvsadm -C
　　#set LVS
　　/sbin/ipvsadm -A -t $VIP:80 -s rr (假如需要session保持添加-p 默认保持300秒)
　　/sbin/ipvsadm -a -t $VIP:80 -r $RIP1:80 -g
　　/sbin/ipvsadm -a -t $VIP:80 -r $RIP2:80 -g
　　#/sbin/ipvsadm -a -t $VIP:80 -r $RIP3:80 -g
　　#Run LVS
　　/sbin/ipvsadm
　　#end
　　;;
　　stop)
　　echo "close LVS Directorserver"
　　/sbin/ipvsadm -C
　　;;
　　*)
　　echo "Usage: $0 {start|stop}"
　　exit 1
　　esac
　　（-s rr 是使用了轮叫算法，能够自行选择相应的算法，更改rr就能够了，ipvsadm -h查看帮助。-g 是使用lvs工作DR直接路由模式，也可自行修改）
　　假如有多个realserver直接添加就能够了,之后启动此脚本就能够了。
　　3、配置realserver脚本
　　#!/bin/bash
　　#description : start realserver
　　#create in 20060812 by ghb
　　VIP=192.168.0.100
　　/sbin/ifconfig lo:0 $VIP broadcast $VIP netmask 255.255.255.255 up
　　/sbin/route add -host $VIP dev lo:0
　　echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
　　echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
　　echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
　　echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
　　sysctl -p
　　#end
　　此脚本使realserver不响应arp请求，将此脚本分别在realserver上执行就能够了。
　　测试：分别启动realserver上的httpd服务
　　在realserver1 执行 echo "This is realserver1" /var/www/html/index.html
　　在realserver2 执行 echo "This is realserver2" /var/www/html/index.html
　　打开IE浏览器输入http://192.168.0.100 应该能够分别看到:This is realserver1 和 This is realserver1.
　　二、配置基于隧道模式Lvs集群
　　1、安装ipvsadmin方法和上面相同，在此略过
　　2、配置LVS directorserver 脚本
　　[root@ns ~]# more /etc/init.d/tunlvs
　　#!/bin/sh
　　# description: start LVS of Directorserver
　　VIP=192.168.0.100
　　RIP1=192.168.0.127
　　RIP2=192.168.0.128
　　#RIPn=192.168.0.n
　　GW=192.168.0.1
　　. /etc/rc.d/init.d/functions
　　case "$1" in
　　start)
　　echo " start LVS of DirectorServer"
　　# set the Virtual IP Address
　　/sbin/ifconfig tunl0 $VIP broadcast $VIP netmask 255.255.255.255 up
　　/sbin/route add -host $VIP dev tunl0
　　#Clear IPVS table
　　/sbin/ipvsadm -C
　　#set LVS
　　/sbin/ipvsadm -A -t $VIP:80 -s rr
　　/sbin/ipvsadm -a -t $VIP:80 -r $RIP1:80 -i
　　/sbin/ipvsadm -a -t $VIP:80 -r $RIP2:80 -i
　　#/sbin/ipvsadm -a -t $VIP:80 -r $RIP3:80 -i
　　#Run LVS
　　/sbin/ipvsadm
　　#end
　　stop)
　　echo "close LVS Directorserver"
　　ifconfig tunl0 down
　　/sbin/ipvsadm -C
　　;;
　　*)
　　echo "Usage: $0 {start|stop}"
　　exit 1
　　esac
　　3、配置realserver
　　[root@localhost ~]# more /etc/init.d/tunl
　　#!/bin/sh
　　# ghb in 20060812
　　# description: Config realserver tunl port and apply arp patch
　　VIP=192.168.0.100
　　. /etc/rc.d/init.d/functions
　　case "$1" in
　　start)
　　echo "Tunl port starting"
　　ifconfig tunl0 $VIP netmask 255.255.255.255 broadcast $VIP up
　　/sbin/route add -host $VIP dev tunl0
　　echo "1" >/proc/sys/net/ipv4/conf/tunl0/arp_ignore
　　echo "2" >/proc/sys/net/ipv4/conf/tunl0/arp_announce
　　echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
　　echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
　　sysctl -p
　　;;
　　stop)
　　echo "Tunl port closing"
　　ifconfig tunl0 down
　　echo 1 > /proc/sys/net/ipv4/ip_forward
　　echo 0 > /proc/sys/net/ipv4/conf/all/arp_announce
　　;;
　　*)
　　echo "Usage: $0 {start|stop}"
　　exit 1
　　esac
　　假如有多个Virutal IP，能够使用tunl0:0,tunl0:1...。
　　此脚本分别在realserver上执行，目的使realserver忽略arp响应，并设定vip.
　　测式同样按照上面的方法测试
　　三、配置基于高可用Lvs heartbeat
　　1、确定LVS使用DR或/tun模式，请对照上面的配置。
　　本例使用tun模式
　　Director server 端脚本文档
　　[root@ns ~]# more /etc/init.d/tunlvs
　　#!/bin/sh
　　# description: start LVS of Directorserver
　　VIP=192.168.0.100
　　RIP1=192.168.0.127
　　RIP2=192.168.0.128
　　#RIPn=192.168.0.n
　　GW=192.168.0.1
　　. /etc/rc.d/init.d/functions
　　case "$1" in
　　start)
　　echo " start LVS of DirectorServer"
　　# set the Virtual IP Address
　　/sbin/ifconfig tunl0 $VIP broadcast $VIP netmask 255.255.255.255 up
　　/sbin/route add -host $VIP dev tunl0
　　#Clear IPVS table
　　/sbin/ipvsadm -C
　　#set LVS
　　/sbin/ipvsadm -A -t $VIP:80 -s rr
　　/sbin/ipvsadm -a -t $VIP:80 -r $RIP1:80 -i
　　/sbin/ipvsadm -a -t $VIP:80 -r $RIP2:80 -i
　　#/sbin/ipvsadm -a -t $VIP:80 -r $RIP3:80 -i
　　#Run LVS
　　/sbin/ipvsadm
　　#end
　　;;
　　stop)
　　echo "close LVS Directorserver"
　　ifconfig tunl0 down
　　/sbin/ipvsadm -C
　　;;
　　*)
　　echo "Usage: $0 {start|stop}"
　　exit 1
　　esac
　　realserver端同样使用上面的配置文档就能够。
　　2、安装heartbeat
　　libnet.tar 下载地址：http://www.packetfactory.net/libnet/ 稳定版本是：1.1.2.1
　　e2fsprogs 能够用rpm 安装光盘
　　heartbeat-2.0.2.tar.gz 下载地址： http://www.linux-ha.org/download/
　　2.1安装
　　tar -zxvf libnet.tar.gz
　　cd libnet
　　./configure
　　make
　　make install
　　tar zxf heartbeat-1.99.4.tar.gz
　　cd heartbeat-1.99.4
　　./ConfigureMe configure --disable-swig --disable-snmp-subagent
　　make
　　make install
　　cp doc/ha.cf doc/haresources doc/authkeys /etc/ha.d/
　　cp ldirectord/ldirectord.cf /etc/ha.d/
　　配置：
　　主配置文档(/etc/ha.d/ha.cf)
　　#debugfile /var/log/ha-debug
　　logfile /var/log/ha-log #指名heartbeat的日志存放位置
　　#crm yes #支持ClusterResourceManager（集群资源管理）功能
　　#bcast eth1 #指明心跳方式使用以太广播方式，并且是在eth1接口上进行广播。
　　logfacility local0
　　keepalive 2#指明心跳时间为2秒（即每两秒钟在eth1上发送一次广播）。
　　deadtime 30#指定在30秒内没有心跳信号，则立即转换服务。
　　warntime 10 #指明心跳延迟的时间为十秒。当10秒钟内备份机不能联系上主机(当前活动的服务器，即无心跳信号)，就会往日志中写入一个警告日志，但此时不会转换服务。
　　initdead 120 #With some configurations, the network takes some time to start working after a reboot. This is a separate "deadtime" to handle that case. It should be at least twice the normal deadtime.
　　udpport 694#Use port number 694 for bcast or ucast communication. This is the default, and the official IANA registered port number.
　　baud 19200
　　serial /dev/ttyS0
　　mcast eth0 225.0.0.1 694 1 0
　　# 当主节点恢复后，是否自动切回
　　auto_failback on
　　# stonith用来确保共享存储环境中的数据完整性
　　#stonith baytech /etc/ha.d/conf/stonith.baytech
　　# watchdog能让系统在出现故障1分钟后重启该机器。这个功能能够帮助服务器在确实停止心跳后能够重新恢复心跳。