memcached+magent+keepalived实现高可用群集
magent代理的用途:如果memcached其中一个缓存节点的机器down机,那么客户端存入的缓存数据将会丢失一部分,我们可以采用 Magent 缓存代理,防止单点现象,缓存代理也可以做备份,通过客户端连接到缓存代理服务器,缓存代理服务器连接缓存服务器,缓存代理服务器可以连接多台Memcached机器,这样就能实现实现高可用以及防止单点故障。
keepalived的用途:
但是如果magent代理服务器宕机了,就不能继续提供服务,所以就用到了keepalived,通过keepalived配置文件设置优先级来决定谁做主magent或者从magent,当主magent正常运行时vip在主magent,当主magent宕机vip自动换到从magent,主magent恢复后vip自动回到主magent上。
实验准备
magent代理与memcached服务装在同一台主机上,仅做实验参考。
主机
系统
IP
角色
软件
memcached 1
CentOS 7
192.168.100.130
主节点
memcached-1.5.6.tar.gz、libevent-2.1.8-stable.tar.gz
magent 1
CentOS 7
192.168.100.130
主代理服务器
magent-0.5.tar.gz
memcached 2
CentOS 7
192.168.100.131
从节点
memcached-1.5.6.tar.gz、libevent-2.1.8-stable.tar.gz
magent 2
CentOS 7
192.168.100.131
从代理服务器
magent-0.5.tar.gz
client
CentOS 7
192.168.100.132
测试主机
telnet
VIP 192.168.100.100
实验步骤如下:
1.yum 安装软件支持包
yum install gcc gcc-c++ -y
2.所有主机关闭防火墙
systemctl stop firewalld.service
setenforce 0
3.client主机安装Telnet软件
yum install telnet -y
3.在memcached 1 和memcached 2 安装memcached 和 libevent软件包
(1)解压软件至opt目录下。
tar xzvf memcached-1.5.6.tar.gz -C /opt/
tar xzvf libevent-2.1.8-stable.tar.gz -C /opt/
(2)编译安装libevent
cd /opt/libevent-2.1.8-stable
./configure --prefix=/usr/local/libevent #指定安装路径
make && make install
(3)编译安装memcached
cd memcached-1.5.6
./configure --with-libevent=/usr/local/libevent
make && make install
(4)libevent-2.1.so.6模块需要复制到/usr/lib64目录下,否则会报错。
ln -s /usr/lib/libevent-2.1.so.6 /usr/lib64/libevent-2.1.so.6
4.在memcached 1上安装magent
(1)在opt目录下创建magent目录,存放magent包解压后的文件。
mkdir /opt/magent
tar xzvf magent-0.5.tar.gz -C /opt/magent
(2)修改ketama.h配置文件。
cd /opt/magent
vim ketama.h #修改头部文件
#ifndef SSIZE_MAX
#define SSIZE_MAX 32767
(3)修改Makefile配置文件
vim Makefile
LIBS = -levent -lm -L /usr/local/libevent/lib#修改
INCLUDE=-I /usr/local/libevent/include #添加
(4)编译magent
make
(5)编译后生成的magent命令文件复制到/usr/bin,以便系统识别magent命令。
cp /opt/magent/magent /usr/bin ##方便系统识别命令
http://i2.运维网.com/images/blog/201807/26/2d38a980f39d6aad27f5917f068635f8.png
5.启动memcached服务
memcached -m 512k -u root -d -l 192.168.100.130 -p11211
memcached -m 512k -u root -d -l 192.168.100.131 -p11211
netstat -ntap |grep 11211
有11211端口表示服务开启成功
http://i2.运维网.com/images/blog/201807/26/dc0f8324e4d6366fa8bce15558e6ec57.png
http://i2.运维网.com/images/blog/201807/26/c63683e027e6e5c96add08a012e2fe72.png
6.client客户端测试magent解决单点故障问题
(1)只启动memcached 1上的magent服务
magent -u root -n 51200 -l 192.168.100.130 -p 12000 -s 192.168.100.130:11211 -b 192.168.100.131:11211
http://i2.运维网.com/images/blog/201807/26/4ece941a45f8aa50a62d6e4343b38ffb.png
(2)在client主机上测试
http://i2.运维网.com/images/blog/201807/26/44dab4fc716b0de5f72d95f2451526a1.png
(3)停掉主节点的服务,在client主机上测试
pkill -9 memcached
http://i2.运维网.com/images/blog/201807/26/ee163ccb2055facf14ff19fb8a952737.png
实验步骤如下:
1.接着上面的操作继续往下做,主从节点都要安装keepalived 软件
yum install keepalived -y
2.从magent不需要安装magent软件,只需把memcached 上1主节点生成的magent命令文件 复制到主magent的/usr/bin目录下
scp /opt/magent/magent root@192.168.100.131:/usr/bin
3.在主magent上编辑keepalived配置文件
vim /etc/keepalived/keepalived.conf
router—_id MAGENT_HA
#删除以下内容
vrrp_skip_check_adv_addr
vrrp_strict
vrrp_garp_interval 0
vrrp_gna_interval 0
#定义新函数magent
vrrp_script magent{
script"/opt/shell/magent.sh"
interval 2 ##时间间隔
}
#修改vrrp_instance实例
INTERFACE ens33
#添加
track_script {
magent
} # 使用新函数magent
#定义一个虚拟IP
virtual_ipaddress {
192.168.100.100
}
#下面多余的部分可以全部删除
4.在从magent上编辑keepalived配置文件
#从主magent上把配置脚本复制到从magent上
scp /etc/keepalived/keepalived.conf root@192.168.100.131:/etc/keepalived/keepalived.conf
vim /etc/keepalived
router_id MAGENT_HB#修改为MAGENT_HB
state BACKUP #修改为BACKUP
virtual_router_id 52 #ID不同
priortity 90 #优先级比主magent低
5.在主magent上配置 magent脚本
mkdir /opt/shell
vim /opt/shell/magent.sh
#!/bin/bash
K=`ps -ef | grep keepalived | grep -v grep | wc -l`
if [ $K -gt 0 ]; then
magent -u root -n 51200 -l 192.168.100.100 -p 12000 -s 192.168.100.130:11211 -b 192.168。100.131:11211
else
pkill -9 magent
fi
-n 51200 //定义用户最大连接数
-l 192.168.100.100 //指定虚拟IP
-p 12000//指定端口号
-s //指定主缓存服务器
-b //指定从缓存服务器
chmod +x magent.sh
6.在从magent上配置 magent脚本
mkdir /opt/shell
vim /opt/shell/magent.sh
#!/bin/bash
K=`ip addr | grep 192.168.100.100 | grep -v grep | wc -l`
if [ $K -gt 0 ]; then
magent -u root -n 51200 -l 192.168.100.100 -p 12000 -s 192.168.100.130:11211 -b 192.168.100.131:11211
else
pkill -9 magent
fi
chmod +x magent.sh
7.主从magent服务器开启keepalived服务
systemctl start keepalived.service
netstat -ntap |grep 12000
如果有12000端口表示服务开启成功
http://i2.运维网.com/images/blog/201807/26/b8becaf24ede457a2499a3d05e9e2d61.png
8.在client主机上测试keepalived高可用
(1)关掉主magent上的keepalived服务,虚拟ip地址漂移到从magent上。
http://i2.运维网.com/images/blog/201807/26/1cb07a631d8207aea362dd652d84f6f4.png
(2)停掉主magent服务,client主机仍然可以进入代理服务端口12000.
http://i2.运维网.com/images/blog/201807/26/c775d16e95b4adfcdb6c4f17fd1014f6.png
(3)查看从magent日志,可以看到从magent服务器切换成master状态
http://i2.运维网.com/images/blog/201807/26/b32c05b275fdad5bbc5bf94fd16ba086.png
至此 memcached+magent+keepalived 高可用群集完成
页:
[1]