nosilence 发表于 2018-12-28 10:59:00

Memcached高可用群集(Memcached主主复制+Keepalived)

案例说明
  为解决memcached单点故障,需要实现memcached缓存的高可用。
首先,需要实现Memcached的主主复制,指任意一台memcached服务器修改数据都会被同步到另外一台,但是memcached API无法判断连接哪一台服务器,因此需要VIP。
其次,通过Keepalived产生的VIP连接memcached服务器,提供高可用架构。

案例拓扑
http://i2.运维网.com/images/blog/201810/06/00511b4b6f87c2e6fe3ee01673582783.png

案例环境




主机
IP地址
操作系统
主要软件




Memcached 1
192.168.37.128
Centos7
libevent;memcached;keepalived;magent


Memcached 1
192.168.37.130
Centos7
libevent;memcached;keepalived



安装软件包
  链接:https://pan.baidu.com/s/1tHnxoldZoX7U0aHnx6GlRg 密码:vl6l

案例实施

一、主从服务器安装memcached
  1、安装环境包

  yum install gcc gcc-c++ make -y
systemctl stop firewalld.service
setenforce 0

  2、解压libevent、memecached包

  tar zxvf libevent-2.1.8-stable.tar.gz -C /opt   
tar zxvf memcached-1.5.6.tar.gz -C /opt

  3、手工编译安装(注意:libevent在先,memcached在后)

cd /opt/libevent-2.1.8-stable/
./configure --prefix=/usr
make && make install
cd /opt/memcached-1.5.6/
./configure --with-libevent=/usr
make && make install
二、主服务器上安装magent
  1、解压magent

  mkdir /opt/magent
tar zxvf magent-0.5.tar.gz -C /opt/magent/    #代理,从服务器不需装

  2、编辑配置文件

cd /opt/magent
vim ketama.h               #文件开头修改
#ifndef SSIZE_MAX
#define SSIZE_MAX 32767
#endif                        #删除最后那个endif
vim Makefile
LIBS = -levent -lm         #注意空格
make                           #安装magent
ls                                    #查看magent可执行程序
http://i2.运维网.com/images/blog/201810/06/2ddfcd06cdc847619470f271320febc6.png
3、将magent程序复制到memcached从服务器

  yum install openssh-clients -y       #安装推送插件
cp magent /usr/bin/         #将编译好的magent程序复制到从服务器
scp magent root@192.168.37.130:/usr/bin

http://i2.运维网.com/images/blog/201810/06/2d073752981950085483de5d8a1b819f.png

三、主服务器上安装keepalived
  yum install keepalived -y

vim /etc/keepalived/keepalived.conf
//12行
router_id MAGENT_HA
删除13-16
//1行下添加
vrrp_script magent {
script "/opt/shell/magent.sh"
interval 2                   #时间间隔2s
}
vrrp_instance VI_1 {   
......
interface ens33             #修改
......
track_script {               #调用-添加 ;注意括号
magent
}
virtual_ipaddress          #修改
192.168.37.188
}                              #定义漂移地址
}                                     #剩余全删除   
http://i2.运维网.com/images/blog/201810/06/11f99719ae9d3d293f922141f5709974.png

四、从服务器上安装keepalived

yum install keepalived -y
cd /etc/keepalived/
mv keepalived.conf keepalived.conf.bk         #修改配置文件名
scp keepalived.conf root@192.168.37.130:/etc/keepalived/    #主服务器上推送
vi keepalived.conf
router_id MAGENT_HB
state BACKUP
virtual_router_id 52
priority 90
http://i2.运维网.com/images/blog/201810/06/a8f43b73fdb2744412442cd62558b94f.png

五、主从服务器写入keepalived配置文件加载的脚本
  1、创建目录

  mkdir /opt/shell

  2、编写脚本

cd /opt/shell
vim magent.sh
#!/bin/bash
K=`ps -ef | grep keepalived | grep -v grep | wc -l`
if [ $K -gt 0 ]; then
magent -u root -n 51200 -l 192.168.37.188 -p 12000 -s 192.168.37.128:11211 -b 192.168.37.130:11211
else
pkill -9 magent
fi
-n 51200                   //定义用户最大连接数
-l 192.168.37.188   //指定虚拟IP
-p 12000                  //指定端口号
-s                              //指定主缓存服务器
-b                           //指定从缓存服务器
chmod +x magent.sh                #添加执行权限
  3、主从服务器开启keepalived服务

  systemctl start keepalived.service
netstat -ntap | grep 12000          #开启较慢,确认magent运行

http://i2.运维网.com/images/blog/201810/06/9818d7d5d8e9e6916cfb6c181edf9921.png
  4、确认主从服务器漂移地址生效
//主服务器:
http://i2.运维网.com/images/blog/201810/06/e9d0f24fd49602ca899f1a77a0118bc9.png
//从服务器 :
http://i2.运维网.com/images/blog/201810/06/cb69e6c5e545422e580db0f8d20cdc9a.png

六、主从服务器开启memecached
  //主服务器:

  memcached -m 512k -u root -d -l 192.168.37.128 -p 11211
netstat -ntap | grep 11211
yum install telnet -y
telnet 192.168.37.128 11211

http://i2.运维网.com/images/blog/201810/06/bd813546647de431d4050728ae3458d1.png
//从服务器:

  memcached -m 512k -u root -d -l 192.168.37.130 -p 11211
netstat -ntap | grep 11211
yum install telnet -y
telnet 192.168.37.130 11211

http://i2.运维网.com/images/blog/201810/06/ffb366eef64d830ba5e0aec12c9da0e2.png

七、客户端测试
  1、连接VIP,写入数据

  yum install telnet -y
telnet 192.168.37.188 12000
add username 0 0 4
1234

http://i2.运维网.com/images/blog/201810/06/9f91141a6551538a7aeb079385275e6f.png
2、主从服务器可以看到写入的内容
http://i2.运维网.com/images/blog/201810/06/a79be2e77f91e1e0789980be040a1b3e.png
3、断掉一台memcached,再次访问,客户端仍然可以连接
http://i2.运维网.com/images/blog/201810/06/0ed1321f572b8edb3dade21ccc574512.png



页: [1]
查看完整版本: Memcached高可用群集(Memcached主主复制+Keepalived)