构建MySQL+DRDB+heartbeat高可用

ameimeng

　　构建MySQL+DRDB+heartbeat高可用
　　DRDB：分布式复制磁盘块设备，是一个软件级别的，不提供任何共享实现的分布式的磁盘镜像解决方案。
实现方式：在数据写入磁盘前通过TCP/IP网络发送给另外一个服务器，在另外一个服务器上存储一份，从节点drdb设备不能读写也不能挂载。

复制模型：
    Protocol A：异步： 数据被送到本地的发送缓冲区即返回成功
    Protocol B：半异步：数据发送到对方的缓冲区返回成功
    Protocol C：同步：数据存储到对方磁盘后才返回成功

一、环境介绍

master: 192.168.56.101
slave: 192.168.56.102
mysql版本：5.5.24
系统版本：RedHat 5.8x86_32

注意：1、同步两个节点的时间
      2、通过修改hosts文件可以使两个节点间能够互相通过主机名访问
      3、确保uname -n得到的结果和主机名保持一致
      4、禁止mysqld服务开机自动启动

二、DRDB部署

1、创建DRBD使用的磁盘分区
最好使用相同大小的单独分区，也可以使用LVM，创建分区过程这里不再给出，可参考其他文档，假设使用的分区情况如下：
master: /dev/sda5   5G
slave: /dev/sda5    5G
创建完成后不要格式化

2、安装软件包
kmod-drbd83
drbd83
可以使用yum安装，在系统安装光盘就附带的有，需要在两个节点都安装。

3、配置DRBD
复制配置文件样例
[iyunv@master ~]# cp /usr/share/doc/drbd83-8.3.8/drbd.conf /etc
cp：是否覆盖“/etc/drbd.conf”? y

打开该配置文件后发现只有两行内容：
include "drbd.d/global_common.conf";
include "drbd.d/*.res";
就是读取drbd.d下的global_common.conf和drbd.d下所有以res结尾的文件，所以不用做任何修改

配置global_common.conf
[iyunv@master ~]# cp /etc/drbd.d/global_common.conf /etc/drbd.d/global_common.conf.bak    //先备份该配置文件
[iyunv@master ~]# vim /etc/drbd.d/global_common.conf //编辑该配置文件
...
global {
    usage-count no;    //是否对使用信息作统计，默认为yes
}
startup {
    wfc-timeout 120;    //等待连接的超时时间
    degr-wfc-timeout 120;   
}
disk {
    on-io-error detach;  //当IO出现错误时执行的动作
    fencing resource-only; //隔离级别
}
net {
    cram-hmac-alg "sha1"; //同步时使用的验证方式
    shared-secret "drdb-test";    //使用的密码
}
syncer {
    rate 100M;    //同步时占用网络速率的最大值
}
...   

创建资源文件，从drbd.conf配置文件中可以看到读取的是以res结尾的文件，所以创建的资源文件必须为res结尾
[iyunv@master ~]# vim /etc/drbd.d/mysql.res

resource mysql {    //定义资源名称为mysql,名字不能包含空格
        on master {    //定义mastre节点的配置
  device /dev/drbd0; //设置drbd设备
                disk /dev/sda5;  //定义使用的哪个磁盘分区
                address 192.168.56.101:7788; //设置本节点的IP和对应端口，用来和另外一个节点通信
        }

        on slave {
  device /dev/drbd0
                disk /dev/sda5;
                address 192.168.56.102:7788;
                meta-disk internal;
        }
}

复制配置文件至slave节点
[iyunv@master ~]# cd /etc/drbd.d/
[iyunv@master drbd.d]# scp -p global_common.conf mysql.res root@192.168.56.102:/etc/drbd.d/
[iyunv@master drbd.d]# scp -p /etc/drbd.conf root@192.168.56.102:/etc/

4、初始化两个节点

初始化主节点：
[iyunv@master drbd.d]# drbdadm create-md mysql
Writing meta data...
initializing activity log
NOT initialized bitmap
New drbd meta data block successfully created.

初始化备用节点：
[iyunv@slave ~]# drbdadm create-md mysql
Writing meta data...
initializing activity log
NOT initialized bitmap
New drbd meta data block successfully created.

5、启动服务并同步磁盘

分别在两个节点上执行：
[iyunv@master ~]# service drbd start
[iyunv@slave ~]# service drbd start
单独启动一个节点时，会一直处在等待另一个节点上线状态。

查看drbd磁盘状态
[iyunv@master ~]# cat /proc/drbd
version: 8.3.8 (api:88/proto:86-94)
GIT-hash: d78846e52224fd00562f7c225bcc25b2d422321d build by mockbuild@builder10.CentOS.org,2010-06-04 08:04:16
0: cs:Connected ro:Secondary/Secondary ds:Inconsistent/Inconsistent C r----
    ns:0 nr:0 dw:0 dr:0 al:0 bm:0 lo:0 pe:0 ua:0 ap:0 ep:1 wo:b oos:4891572
可以看到两个节点并未同步而且都处于Secondary状态

设置master节点成为主节点
[iyunv@master ~]# drbdadm -- --overwrite-data-of-peer primary mysql
[iyunv@master ~]# cat /proc/drbd  //查看状态
version: 8.3.8 (api:88/proto:86-94)
GIT-hash: d78846e52224fd00562f7c225bcc25b2d422321d build by mockbuild@builder10.centos.org, 2010-06-04 08:04:16
0: cs:SyncSource ro:Primary/Secondary ds:UpToDate/Inconsistent C r----
    ns:139176 nr:0 dw:0 dr:147072 al:0 bm:8 lo:1 pe:10 ua:247 ap:0 ep:1 wo:b oos:1820920
[>...................] sync'ed:  7.4% (1820920/1959800)K delay_probe: 13
finish: 0:01:44 speed: 17,360 (17,360) K/sec
可以看到已经开始同步7.4%

6、同步完成后格式化并挂载测试
等待同步完成后磁盘状态将转变为UpToDate/UpToDate
[iyunv@master ~]# mke2fs -j /dev/drbd0

挂载测试
[iyunv@master ~]# mount /dev/drbd0 /mnt/
[iyunv@master ~]# ls /mnt/
lost+found
[iyunv@master ~]# cp /etc/fstab /mnt/
[iyunv@master ~]# umount /mnt/
[iyunv@master ~]# drbdadm secondary mysql    //使当前节点的mysql资源转为备用

在备用节点测试
[iyunv@slave ~]# drbdadm primary mysql
[iyunv@slave ~]# mount /dev/drbd0 /mnt/
[iyunv@slave ~]# ls /mnt/
fstab  lost+found
可以看到在备用节点成功测试