heartbeat搭建高可用NFS

re2121

基本环境准备；

[iyunv@localhost ~]# vim/etc/sysconfig/network  （修改主机名）
NETWORKING=yes
HOSTNAME=node1.dragon.com                    (这里每台主机自行修改为node1，2，3)
[iyunv@localhost~]# vim /etc/hosts                                （修改主机文件，分别指向node1,2,3）
127.0.0.1  localhost localhost.localdomain localhost4 localhost4.localdomain4
::1        localhost localhost.localdomain localhost6 localhost6.localdomain6
127.0.0.1node1.dragon.com node1             (这里每台主机自行修改为node1,2,3)
172.16.18.10node1.dragon.com node1
172.16.18.20node2.dragon.com node2
172.16.18.30node3.dragon.com node3
[iyunv@localhost ~]# scp /etc/hosts node2:/etc/         (把文件传给node2,node3)
[iyunv@localhost ~]# scp /etc/hosts node3:/etc/
[iyunv@localhost ~]# scp/etc/sysconfig/network node2:/etc/sysconfig/
[iyunv@localhost ~]# scp/etc/sysconfig/network node3:/etc/sysconfig/
[iyunv@ localhost ~]# init 6（修改完三台服务器名称记得重启）

生成私钥；
方便几台服务器之间传输文件。这里仅是node1给node2和node3传私钥，如果node2想给node1传文件只需同样的配置；
[iyunv@node1 ~]# ssh-keygen -t rsa  (生成密钥，无密码)
[iyunv@node1 ~]# ssh-copy-id node2  （密钥传给node2）
[iyunv@node1 ~]# ssh-copy-id node3  （密钥传给node2）

安装相关包
（在两node1和node2执行）
[iyunv@node1 yum.repos.d]# yum -ygroupinstall "development tools" "platform development"  （安装开发平台，开发环境，三服务器全装）
[iyunv@node1 ~]# yum install net-snmp-libs libnet  PyXML  perl-TimeDate  （安装依赖关系，node1,node2装）
[iyunv@node1 heartbeat2]# cd heartbeat2/
[iyunv@node1 heartbeat2]# ll                                   （相关包可去官网下载）
-rw-r--r-- 1 root root 1420924 Sep 10  2013 heartbeat-2.1.4-12.el6.x86_64.rpm
-rw-r--r-- 1 root root 3589552 Sep 10  2013heartbeat-debuginfo-2.1.4-12.el6.x86_64.rpm
-rw-r--r-- 1 root root  282836 Sep 10 2013 heartbeat-devel-2.1.4-12.el6.x86_64.rpm
-rw-r--r-- 1 root root  168052 Sep 10 2013 heartbeat-gui-2.1.4-12.el6.x86_64.rpm
-rw-r--r-- 1 root root  108932 Sep 10 2013 heartbeat-ldirectord-2.1.4-12.el6.x86_64.rpm
-rw-r--r-- 1 root root   92388 Sep 10 2013 heartbeat-pils-2.1.4-12.el6.x86_64.rpm
-rw-r--r-- 1 root root  166580 Sep 10 2013 heartbeat-stonith-2.1.4-12.el6.x86_64.rpm
[iyunv@node1 heartbeat2]# rpm -ivh heartbeat-pils-2.1.4-12.el6.x86_64.rpmheartbeat-stonith-2.1.4-12.el6.x86_64.rpm heartbeat-2.1.4-12.el6.x86_64.rpm

设置时间同步
[iyunv@node1 yum.repos.d]# date ;ssh node2'date'   （查看时间 ）
[iyunv@node1 yum.repos.d]# ntpdate172.16.0.1 ;ssh node2  'ntpdate172.16.0.1'  （我时间服务器是172.16.0.1，也可以去百度找时间服务器）
[iyunv@node2 heartbeat2]# which ntpdate           （查看某命令路径）
/usr/sbin/ntpdate
[iyunv@node1 yum.repos.d]# crontab –e               （在两节点执行，设置任务计划，每三分钟同步一次）
*/3 * * * */usr/sbin/ntpdate 172.16.0.1  &>/dev/null

配置heartbeat
[iyunv@node1 yum.repos.d]# cd/usr/share/doc/heartbeat-2.1.4/
[iyunv@node1 heartbeat-2.1.4]# cp -pauthkeys haresources ha.cf /etc/ha.d/  (保持原有属性，复制文件)

ha.cf:heartbeat的主配置文件；

authkeys:集群信息加密算法及密钥；

haresources:heartbeat v1的CRM配置接口；

[iyunv@node1 heartbeat-2.1.4]# cd /etc/ha.d/
[iyunv@node1 ha.d]# chmod 600 authkeys
[iyunv@node1 ha.d]# vim ha.cf               （编辑主配置文件；）
#      File to write other messages to
logfile /var/log/ha-log
#      Facility to use for syslog()/logger
#logfacility    local0

……………..

mcast eth0 225.0.0.14 6941 0               （多播地址，范围224.0.2.0～238.255.255.255
，可随意填写, 基于多播的方式进行通信 ，选网卡，组，端口，多播报文ttl值（1是直达目标主机），0拒绝接收本地回环
）
#     Set up a unicast / udp heartbeat medium
……….
#      (note: auto_failback can be any boolean or "legacy")
auto_failback on             (默认选项，出故障时自动恢复)
……….
#      Tell what machines are in the cluster
#      node    nodename ...    -- must match uname -n
#node  ken3
#node  kathy
node node1.dragon.com                         （定义节点名称，必须是各主机#uname -n的名称）
node node2.dragon.com
……….
#      note: don't use a cluster node as ping node   
#ping 10.10.10.254
ping 172.16.18.30           （定义仲裁节点，能Ping通就说明正常工作）
……….
#      library in the system.     
compression    bz2              （定义压缩工具）
#      Confiugre compression threshold
compression_threshold 2               （小于2K不压缩）

[iyunv@node1 ~]# openssl rand -hex 6  （生成一个随机数）
febe06c057d0
[iyunv@node1 ha.d]# vim authkeys       （集群信息加密算法及密钥）
#auth 1
#1 crc
#2 sha1 HI!
#3 md5 Hello!
auth 1
1 sha1 febe06c057d0
[iyunv@node1 ha.d]# vim haresources  （设置资源管理haresources 主节点）
#      They must match the names of the nodes listed in ha.cf, which in turn
#      must match the `uname -n` of some node in the cluster.  So they aren't
#      virtual in any sense of the word.
node1.dragon.com  172.16.18.51/16/eth0/172.16.255.255 httpd （主节点，vip（虚拟IP），启动的服务）
[iyunv@node1 ha.d]# scp -p authkeysharesources  ha.cf  node2:/etc/ha.d/  （node1,node2配置同步）
[iyunv@node1 heartbeat2]# service heartbeatstart ; ssh node2 'service heartbeat start'  (启动两节点heartbeat服务,会自动启用httpd服务)
[iyunv@node1 ha.d]# vim /var/www/html/index.html
node1
[iyunv@node2 heartbeat2]# vim/var/www/html/index.html
node2
访问虚拟IP，发现vip在Node1节点上


[iyunv@node1 ha.d]# service heartbeat stop  （再访问172.16.18.51，会跳转到node2）

[iyunv@node1 ha.d]# service heartbeat start

[iyunv@node1 ha.d]# cd /usr/lib64/heartbeat/
[iyunv@node1 heartbeat]# ./hb_standby  (也可以输入命令使自己变备用节点)
[iyunv@node1 heartbeat]#./hb_takeover  (也可以输入命令使自己变主节点)


添加NFS服务器

[iyunv@node3 yum.repos.d]# mkdir /web/htdocs–pv
[iyunv@node3 yum.repos.d]# vim/web/htdocs/index.html
pages from nfsserver
[root@node3yum.repos.d]# vim /etc/exports   （共享文件/web/htdocs）      
/web/htdocs172.16.0.0/16(rw,no_root_squash)
[iyunv@node3 yum.repos.d]# service nfs start     （启动NFS服务）
[iyunv@node3 yum.repos.d]# chkconfig nfs on （设置开机启动此服务）
[iyunv@node3 yum.repos.d]# chkconfig   –list  nfs  （查看开机启动）
[iyunv@node1 heartbeat]# cd /etc/ha.d/  
[iyunv@node1 ha.d]# service heartbeat stop;ssh node2 'service heartbeat stop'  （先关闭服务）
[iyunv@node1 ha.d]#  mount -t nfs 172.16.18.30:/web/htdocs /mnt  （尝试挂载，最好在两节点都亲尝试）
[iyunv@node1 ha.d]# mount                   （查看是否挂载成功）
[iyunv@node1 ha.d]# umount /mnt/  （成功后卸载）
[iyunv@node1 ha.d]# vim haresources
#node1.dragon.com172.16.18.51/16/eth0/172.16.255.255 httpd (注释前面的配置)
node1.dragon.com172.16.18.51/16/eth0/172.16.255.255Filesystem::172.16.18.30:/web/htdocs::/var/www/html::nfs httpd
Node1（默认主节点名称）   IP地址 Filesystem（代理文件）：：172.16.18.30:/web/htdocs（代理文件地址，我们这里是共享文件，也可以是本地文件，如果是本地文件直接写本地路径）::/var/www/html挂在点::nfs文件系统 所用服务:httpd

[iyunv@node1 ha.d]# scp haresourcesnode2:/etc/ha.d/   （复制给Node2）
[iyunv@node1 ha.d]# service heartbeatrestart ;ssh node2 'service heartbeat restart' （启动服务）
[iyunv@node1 ha.d]# mount           （等待几秒发现文件已经挂载成功）
172.16.18.30:/web/htdocson /var/www/html type nfs (rw,vers=4,addr=172.16.18.30,clientaddr=172.16.18.10)

再次访问172.16.18.51（虚拟IP），就显示NFS的页面了！


[iyunv@node1 ha.d]# serviceheartbeat stop （停止主节点服务）
[iyunv@node2 ha.d]# mout    （文件已经挂载到备用节点）
172.16.18.30:/web/htdocson /var/www/html type nfs (rw,vers=4,addr=172.16.18.30,clientaddr=172.16.18.20)
仍然可以访问！！！