设为首页 收藏本站

运维网

 找回密码
 立即注册
查看: 928|回复: 0

[经验分享] (转帖)通过Keepalived实现Redis Failover自动故障切换功能[实践分享]

[复制链接]
uf123

尚未签到
发表于 2016-12-20 10:44:33 | 显示全部楼层 |阅读模式
 
　　转自（http://heylinux.com/archives/1942.html）
参考资料：
http://patrick-tang.blogspot.com/2012/06/redis-keepalived-failover-system.html
http://deidara.blog.iyunv.com/400447/302402
目前，Redis还没有一个类似于MySQL Proxy或Oracle RAC的官方HA方案。
Redis作者有一个名为Redis Sentinel的计划(http://redis.io/topics/sentinel)，据称将会有监控，报警和自动故障转移三大功能，非常不错。
但可惜的是短期内恐怕还不能开发完成。
因此，如何在出现故障时自动转移是一个需要解决的问题。
通过对网上一些资料的搜索，有建议采用HAProxy或Keepalived来实现的，事实上如果是做Failover而非负载均衡的话，Keepalived的效率肯定是超过HAProxy的，所以我决定采用Keepalived的方案。
环境介绍：
Master: 10.6.1.143
Slave: 10.6.1.144
Virtural IP Address (VIP): 10.6.1.200
设计思路：
当 Master 与 Slave 均运作正常时, Master负责服务，Slave负责Standby；
当 Master 挂掉，Slave 正常时, Slave接管服务，同时关闭主从复制功能；
当 Master 恢复正常，则从Slave同步数据，同步数据之后关闭主从复制功能，恢复Master身份，于此同时Slave等待Master同步数据完成之后，恢复Slave身份。
然后依次循环。
需要注意的是，这样做需要在Master与Slave上都开启本地化策略，否则在互相自动切换的过程中，未开启本地化的一方会将另一方的数据清空，造成数据完全丢失。
下面，是具体的实施步骤：
在Master和Slave上安装Keepalived
$ sudo apt-get install keepalived
修改Master和Slave的/etc/hosts文件
$ sudo vim /etc/hosts
1127.0.0.1   localhost

210.6.1.143  redis

310.6.1.144  redis-slave



默认安装完成keepalived之后是没有配置文件的，因此我们需要手动创建：
首先，在Master上创建如下配置文件：
$ sudo vim /etc/keepalived/keepalived.conf
01vrrp_script chk_redis {

02                script "/etc/keepalived/scripts/redis_check.sh"   ###监控脚本

03                interval 2                                        ###监控时间

04}

05vrrp_instance VI_1 {

06        state MASTER                            ###设置为MASTER

07        interface eth0                          ###监控网卡   

08        virtual_router_id 51

09        priority 101                            ###权重值

10        authentication {

11                     auth_type PASS             ###加密

12                     auth_pass redis            ###密码

13        }

14        track_script {

15                chk_redis                       ###执行上面定义的chk_redis

16        }

17        virtual_ipaddress {

18             10.6.1.200                         ###VIP

19        }

20        notify_master /etc/keepalived/scripts/redis_master.sh

21        notify_backup /etc/keepalived/scripts/redis_backup.sh

22        notify_fault  /etc/keepalived/scripts/redis_fault.sh

23        notify_stop   /etc/keepalived/scripts/redis_stop.sh

24}



然后，在Slave上创建如下配置文件：
$ sudo vim /etc/keepalived/keepalived.conf
01vrrp_script chk_redis {

02                script "/etc/keepalived/scripts/redis_check.sh"   ###监控脚本

03                interval 2                                        ###监控时间

04}

05vrrp_instance VI_1 {

06        state BACKUP                                ###设置为BACKUP

07        interface eth0                              ###监控网卡

08        virtual_router_id 51

09        priority 100                                ###比MASTRE权重值低

10        authentication {

11                     auth_type PASS

12                     auth_pass redis                ###密码与MASTRE相同

13        }

14        track_script {

15                chk_redis                       ###执行上面定义的chk_redis

16        }

17        virtual_ipaddress {

18             10.6.1.200                         ###VIP

19        }

20        notify_master /etc/keepalived/scripts/redis_master.sh

21        notify_backup /etc/keepalived/scripts/redis_backup.sh

22        notify_fault  /etc/keepalived/scripts/redis_fault.sh

23        notify_stop   /etc/keepalived/scripts/redis_stop.sh

24}



 
在Master和Slave上创建监控Redis的脚本
$ sudo mkdir /etc/keepalived/scripts
$ sudo vim /etc/keepalived/scripts/redis_check.sh
01#!/bin/bash

02 

03ALIVE=`/opt/redis/bin/redis-cli PING`

04if [ "$ALIVE" == "PONG" ]; then

05  echo $ALIVE

06  exit 0

07else

08  echo $ALIVE

09  exit 1

10fi



编写以下负责运作的关键脚本：
notify_master /etc/keepalived/scripts/redis_master.sh
notify_backup /etc/keepalived/scripts/redis_backup.sh
notify_fault /etc/keepalived/scripts/redis_fault.sh
notify_stop /etc/keepalived/scripts/redis_stop.sh
因为Keepalived在转换状态时会依照状态来呼叫：
当进入Master状态时会呼叫notify_master
当进入Backup状态时会呼叫notify_backup
当发现异常情况时进入Fault状态呼叫notify_fault
当Keepalived程序终止时则呼叫notify_stop
首先，在Redis Master上创建notity_master与notify_backup脚本：
$ sudo vim /etc/keepalived/scripts/redis_master.sh
01#!/bin/bash

02 

03REDISCLI="/opt/redis/bin/redis-cli"

04LOGFILE="/var/log/keepalived-redis-state.log"

05 

06echo "[master]" >> $LOGFILE

07date >> $LOGFILE

08echo "Being master...." >> $LOGFILE 2>&1

09 

10echo "Run SLAVEOF cmd ..." >> $LOGFILE

11$REDISCLI SLAVEOF 10.6.1.144 6379 >> $LOGFILE  2>&1

12sleep 10 #延迟10秒以后待数据同步完成后再取消同步状态

13 

14echo "Run SLAVEOF NO ONE cmd ..." >> $LOGFILE

15$REDISCLI SLAVEOF NO ONE >> $LOGFILE 2>&1



$ sudo vim /etc/keepalived/scripts/redis_backup.sh
01#!/bin/bash

02 

03REDISCLI="/opt/redis/bin/redis-cli"

04LOGFILE="/var/log/keepalived-redis-state.log"

05 

06echo "[backup]" >> $LOGFILE

07date >> $LOGFILE

08echo "Being slave...." >> $LOGFILE 2>&1

09 

10sleep 15 #延迟15秒待数据被对方同步完成之后再切换主从角色

11echo "Run SLAVEOF cmd ..." >> $LOGFILE

12$REDISCLI SLAVEOF 10.6.1.144 6379 >> $LOGFILE  2>&1



接着，在Redis Slave上创建notity_master与notify_backup脚本：
$ sudo vim /etc/keepalived/scripts/redis_master.sh
01#!/bin/bash

02 

03REDISCLI="/opt/redis/bin/redis-cli"

04LOGFILE="/var/log/keepalived-redis-state.log"

05 

06echo "[master]" >> $LOGFILE

07date >> $LOGFILE

08echo "Being master...." >> $LOGFILE 2>&1

09 

10echo "Run SLAVEOF cmd ..." >> $LOGFILE

11$REDISCLI SLAVEOF 10.6.1.143 6379 >> $LOGFILE  2>&1

12sleep 10 #延迟10秒以后待数据同步完成后再取消同步状态

13 

14echo "Run SLAVEOF NO ONE cmd ..." >> $LOGFILE

15$REDISCLI SLAVEOF NO ONE >> $LOGFILE 2>&1



$ sudo vim /etc/keepalived/scripts/redis_backup.sh
01#!/bin/bash

02 

03REDISCLI="/opt/redis/bin/redis-cli"

04LOGFILE="/var/log/keepalived-redis-state.log"

05 

06echo "[backup]" >> $LOGFILE

07date >> $LOGFILE

08echo "Being slave...." >> $LOGFILE 2>&1

09 

10sleep 15 #延迟15秒待数据被对方同步完成之后再切换主从角色

11echo "Run SLAVEOF cmd ..." >> $LOGFILE

12$REDISCLI SLAVEOF 10.6.1.143 6379 >> $LOGFILE  2>&1



然后在Master与Slave创建如下相同的脚本：
$ sudo vim /etc/keepalived/scripts/redis_fault.sh
1#!/bin/bash

2 

3LOGFILE=/var/log/keepalived-redis-state.log

4 

5echo "[fault]" >> $LOGFILE

6date >> $LOGFILE



$ sudo vim /etc/keepalived/scripts/redis_stop.sh
1#!/bin/bash

2 

3LOGFILE=/var/log/keepalived-redis-state.log

4 

5echo "[stop]" >> $LOGFILE

6date >> $LOGFILE



给脚本都加上可执行权限：
$ sudo chmod +x /etc/keepalived/scripts/*.sh
脚本创建完成以后，我们开始按照如下流程进行测试：
1.启动Master上的Redis
$ sudo /etc/init.d/redis start
2.启动Slave上的Redis
$ sudo /etc/init.d/redis start
3.启动Master上的Keepalived
$ sudo /etc/init.d/keepalived start
4.启动Slave上的Keepalived
$ sudo /etc/init.d/keepalived start
5.尝试通过VIP连接Redis:
$ redis-cli -h 10.6.1.200 INFO
连接成功，Slave也连接上来了。
role:master
slave0:10.6.1.144,6379,online
6.尝试插入一些数据：
$ redis-cli -h 10.6.1.200 SET Hello Redis
OK
从VIP读取数据
$ redis-cli -h 10.6.1.200 GET Hello
"Redis"
从Master读取数据
$ redis-cli -h 10.6.1.143 GET Hello
"Redis"
从Slave读取数据
$ redis-cli -h 10.6.1.144 GET Hello
"Redis"
下面，模拟故障产生：
将Master上的Redis进程杀死：
$ sudo killall -9 redis-server
查看Master上的Keepalived日志
$ tailf /var/log/keepalived-redis-state.log
[fault]
Thu Sep 27 08:29:01 CST 2012
同时Slave上的日志显示：
$ tailf /var/log/keepalived-redis-state.log
[master]
Fri Sep 28 14:14:09 CST 2012
Being master....
Run SLAVEOF cmd ...
OK
Run SLAVEOF NO ONE cmd ...
OK
然后我们可以发现，Slave已经接管服务，并且担任Master的角色了。
$ redis-cli -h 10.6.1.200 INFO
$ redis-cli -h 10.6.1.144 INFO
role:master
然后我们恢复Master的Redis进程
$ sudo /etc/init.d/redis start
查看Master上的Keepalived日志
$ tailf /var/log/keepalived-redis-state.log
[master]
Thu Sep 27 08:31:33 CST 2012
Being master....
Run SLAVEOF cmd ...
OK
Run SLAVEOF NO ONE cmd ...
OK
同时Slave上的日志显示：
$ tailf /var/log/keepalived-redis-state.log
[backup]
Fri Sep 28 14:16:37 CST 2012
Being slave....
Run SLAVEOF cmd ...
OK
可以发现目前的Master已经再次恢复了Master的角色，故障切换以及自动恢复都成功了。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表，该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有，请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意，请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息，一经发现立即删除。若您因此触犯法律，一切后果自负，我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集，我们仅提供一个展示、介绍、观摩学习的平台，我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责，亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏，不得用于商业或者其他用途，否则，一切后果均由您自己承担，我们对此不承担任何法律责任
7、如涉及侵犯版权等问题，请您及时通知我们，我们将立即采取措施予以解决
8、联系人Email：admin@iyunv.com 网址：www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址：https://www.yunweiku.com/thread-316891-1-1.html 上篇帖子： 使用 acl 库编写高效的 C++ redis 客户端应用 下篇帖子： 通过Keepalived实现Redis Failover自动故障切换功能[实践分享]
回复

使用道具 举报

返回列表
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群，最新一手资源尽在官方微信交流群！快快加入我们吧...

扫描微信二维码查看详情

客服 E-mail:iyunvcom@gmail.com

本站由青云提供云计算服务

运维网--中国最专业的运维工程师交流社区

豫ICP备20007574号-1 Copyright © 2012-2025

关于我们

发展历程

联系我们

关注我们

广告服务

广告案例

隐私条款

免责声明

用户登录

用户注册

版主守则

申请版主

手机版

金币获取

帮助中心

每日签到

Good Good

Study

Day Day

UP


客服E-mail:kefu@iyunv.com 客服QQ：1061981298


QQ群⑦：运维网交流群⑦ QQ群⑧：运维网交流群⑧ k8s群：运维网kubernetes交流群


提醒：禁止发布任何违反国家法律、法规的言论与图片等内容；本站内容均来自个人观点与网络等信息，非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来，其版权均归原作者及其网站所有，我们尊重他人的合法权益，如有内容侵犯您的合法权益，请及时与我们联系进行核实删除！



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表