设为首页 收藏本站
查看: 1242|回复: 0

[经验分享] 搭建redis给mysql做缓存

[复制链接]

尚未签到

发表于 2018-11-6 08:06:53 | 显示全部楼层 |阅读模式
  安装redis的前提是lnmp或者lamp的环境已经搭建完成。
  安装redis
  1、安装redis(或可以选择yum安装)
123456789101112[root@redis ~]# wget -c -t 0 http://download.redis.io/releases/redis-2.8.19.tar.gz  [root@redis ~]# mkdir /usr/local/redis [root@redis ~]# tar xvf redis-2.8.19.tar.gz #安装很简单、直接make就可以了[root@redis ~]# cd redis-2.8.19[root@redis redis-2.8.19]# make  #编译完成后,将src中的可执行文件拷贝到刚刚创建的目录中[root@redis src]# cp redis-benchmark redis-check-aof redis-check-dump redis-cli redis-sentinel redis-server /usr/local/redis/[root@redis redis-2.8.19]# cp redis.conf sentinel.conf /usr/local/redis/  Redis-benchmark      压力测试工具
  Redis-check-aof      检查redis持久化命令文件的完整性
  Redis-check-dump     检查redis持久化数据文件的完整性
  Redis-cli            redis在linux上的客户端
  Redis-sentinel       redis-sentinel是集群管理工具,主要负责主从切换。
  Redis-server         Redis服务器的daemon启动程序
  2、安装php的redis扩展
123456789101112131415[root@redis ~]# wget -c -t 0 https://github.com/owlient/phpredis/archive/master.zip[root@redis ~]# unzip master.zip [root@redis ~]# cd phpredis-master/[root@redis phpredis-master]# phpize [root@redis phpredis-master]# ./configure --with-php-config=/usr/bin/php-config[root@redis phpredis-master]# make && make install  #修改php的配置文件,如果没有“extension=redis.so”,就加上这一行[root@redis ~]# vim /etc/php.ini extension=redis.so [root@redis ~]# /etc/init.d/php-fpm restart停止 php-fpm:                                             [确定]正在启动 php-fpm:                                         [确定]  3、是否安装成功
  还是访问phpinfo的那个界面
DSC0000.jpg

  看到这个就是安装完成了。
  五、读写分离
  这里只是简单的做了一下读,没有写操作的相关代码,过一会测试,直接到数据库里执行update来模拟写操作。
  1、在mysql中插入一些测试数据
123456789101112131415161718[root@redis ~]# mysql -u root -p123456mysql> create database mytest;mysql> CREATE TABLE `test` (`id` int(7) NOT NULL AUTO_INCREMENT, `name` char(8) DEFAULT NULL, PRIMARY KEY (`id`)) ENGINE=InnoDB AUTO_INCREMENT=10 DEFAULT CHARSET=utf8;mysql> INSERT INTO `test` VALUES (1,'sven'),(2,'jim'),(3,'zhu'),(4,'wang'),(5,'ftd'),(6,'test'),(7,'test01'),(8,'test02'),(9,'test03');mysql> select * from mytest.test;+----+--------+| id | name   |+----+--------+|  1 | sven   ||  2 | jim    ||  3 | zhu    ||  4 | wang   ||  5 | ftd    ||  6 | test   ||  7 | test01 ||  8 | test02 ||  9 | test03 |+----+--------+  2、编写php的测试代码 ##可以直接在html下创建1.php复制下面代码,修改mysql连接地址进行测试
12345678910111213141516171819202122232425262728293031323334353637383940  第一次访问,redis中没有对应的KEY时
DSC0001.jpg

  再次访问,此时redis中已有相关数据
DSC0002.jpg

  到这里,我们已经实现了redis作为mysql的缓存服务器,但是如果更新了mysql,redis中仍然会有对应的KEY,数据就不会更新,此时就会出现mysql和redis数据不一致的情况。所以接下来就要通过mysql触发器将改变的数据同步到redis中。
  六、通过gearman实现同步
  1、介绍
  Gearman是一个支持分布式的任务分发框架:
  Gearman Job Server:Gearman核心程序,需要编译安装并以守护进程形式运行在后台。
  Gearman Client:可以理解为任务的请求者。
  Gearman Worker:任务的真正执行者,一般需要自己编写具体逻辑并通过守护进程方式运行,Gearman Worker接收到Gearman Client传递的任务内容后,会按顺序处理。
  大致流程:
  下面要编写的mysql触发器,就相当于Gearman的客户端。修改表,插入表就相当于直接下发任务。然后通过lib_mysqludf_json UDF库函数将关系数据映射为JSON格式,然后在通过gearman-mysql-udf插件将任务加入到Gearman的任务队列中,最后通过redis_worker.php,也就是Gearman的worker端来完成redis数据库的更新。
  2、安装启动      (也可以选择yum安装)如果是yum安装要安装如下几个包
DSC0003.jpg

12345[root@redis ~]# yum -y install gearmand libgearman-devel[root@redis ~]# /etc/init.d/gearmand start正在启动 gearmand:                                        [确定][root@redis ~]# /etc/init.d/gearmand statusgearmand (pid  7702) 正在运行...  3、安装php的gearman扩展
123456789101112131415[root@redis ~]# wget -c -t 0 https://pecl.php.net/get/gearman-1.1.1.tgz  [root@redis ~]# tar xvf gearman-1.1.1.tgz [root@redis ~]# cd gearman-1.1.1[root@redis gearman-1.1.1]# phpize [root@redis gearman-1.1.1]# ./configure --with-php-config=/usr/bin/php-config[root@redis gearman-1.1.1]# make [root@redis gearman-1.1.1]# make install #如果php的配置文件中没有extension = gearman.so,就加上此行[root@redis ~]# vim /etc/php.ini extension = gearman.so[root@redis ~]# /etc/init.d/php-fpm restart停止 php-fpm:                                             [确定]正在启动 php-fpm:                                         [确定]
DSC0004.jpg

  这样就是安装成功了
  4、安装lib_mysqludf_json
  lib_mysqludf_json UDF库函数将关系数据映射为JSON格式。通常,数据库中的数据映射为JSON格式,是通过程序来转换的。
123456789101112131415161718192021222324252627[root@redis ~]# wget -c -t 0 https://github.com/mysqludf/lib_mysqludf_json/archive/master.zip[root@redis ~]# unzip master.zip [root@redis ~]# cd lib_mysqludf_json-master/[root@redis lib_mysqludf_json-master]# gcc $(mysql_config --cflags) -shared -fPIC -o lib_mysqludf_json.so lib_mysqludf_json.clib_mysqludf_json.c:40:23: 错误:my_global.h:没有那个文件或目录lib_mysqludf_json.c:41:20: 错误:my_sys.h:没有那个文件或目录lib_mysqludf_json.c:43:19: 错误:mysql.h:没有那个文件或目录lib_mysqludf_json.c:44:21: 错误:m_ctype.h:没有那个文件或目录lib_mysqludf_json.c:45:22: 错误:m_string.h:没有那个文件或目录 #这里编译报错是因为没有安装mysql的开发包,如果是源码安装的mysql,需要在/etc/ld.so.conf.d/#目录下新建一个文件告诉系统mysql的头文件在哪里[root@redis lib_mysqludf_json-master]# yum -y install mysql-devel[root@redis lib_mysqludf_json-master]# gcc $(mysql_config --cflags) -shared -fPIC -o lib_mysqludf_json.so lib_mysqludf_json.c mysql> show global variables like 'plugin_dir';+---------------+-------------------------+| Variable_name | Value                   |+---------------+-------------------------+| plugin_dir    | /usr/lib64/mysql/plugin |+---------------+-------------------------+ #将模块拷贝到插件目录下[root@redis lib_mysqludf_json-master]# cp lib_mysqludf_json.so /usr/lib64/mysql/plugin/ #注册UDF函数mysql> CREATE FUNCTION json_object RETURNS STRING SONAME 'lib_mysqludf_json.so';  5、安装gearman-mysql-udf
  这个插件是用来管理调用 Gearman 的分布式的队列。
123456789101112131415161718192021222324[root@redis ~]# wget -c -t 0 https://launchpad.net/gearman-mysql-udf/trunk/0.6/+download/gearman-mysql-udf-0.6.tar.gz[root@redis ~]# tar xvf gearman-mysql-udf-0.6.tar.gz [root@redis ~]# cd gearman-mysql-udf-0.6[root@redis gearman-mysql-udf-0.6]# ./configure --with-mysql=/usr/bin/mysql_config --libdir=/usr/lib64/mysql/plugin/[root@redis gearman-mysql-udf-0.6]# make [root@redis gearman-mysql-udf-0.6]# make install #注册UDF函数mysql> CREATE FUNCTION gman_do_background RETURNS STRING SONAME 'libgearman_mysql_udf.so';mysql> CREATE FUNCTION gman_servers_set RETURNS STRING SONAME 'libgearman_mysql_udf.so'; #查看函数mysql> select * from mysql.func;+--------------------+-----+-------------------------+----------+| name               | ret | dl                      | type     |+--------------------+-----+-------------------------+----------+| json_object        |   0 | lib_mysqludf_json.so    | function || gman_do_background |   0 | libgearman_mysql_udf.so | function || gman_servers_set   |   0 | libgearman_mysql_udf.so | function |+--------------------+-----+-------------------------+----------+ #指定gearman的服务信息mysql> SELECT gman_servers_set('127.0.0.1:4730');  6、编写mysql触发器(根据实际情况编写)
12345DELIMITER $$CREATE TRIGGER datatoredis AFTER UPDATE ON test FOR EACH ROW BEGIN    SET @RECV=gman_do_background('syncToRedis', json_object(NEW.id as `id`, NEW.name as `name`));   END$$DELIMITER ;  7、编写gearman的worker端
123456789101112131415161718192021222324[root@redis ~]# vim /www/redis_worker.php #后台运行[root@redis www]# nohup php redis_worker.php &  "$redis->set($work->id, $work->name);"这条语句就是将id作KEY和name作VALUE分开存储,需要和前面写的php测试代码的存取一致。
  8、更新mysql中的数据
1234567891011121314mysql> set @RECV = 1;mysql> select @RECV;+------+| @RECV|+------+|    1 |+------+mysql> update test set name = 'ssss' where id = 1;mysql> select @RECV;+------+| @RECV|+------+| NULL |+------+  从返回值可以看到,触发器是触发成功的(这里的@RECV是上面mysql TIGGER的返回值)。我们在redis中查看数据:
123[root@redis redis]# ./redis-cli 127.0.0.1:6379> get 1"sven"  这里的数据居然没有变化,这是我们就要排错了。
1234567891011[root@redis ~]# vim /var/log/audit/audit.log type=AVC msg=audit(1427807674.425:107): avc:  denied  { name_connect } for  pid=12453 comm="mysqld" dest=4730 scontext=unconfined_u:system_r:mysqld_t:s0 tcontext=system_u:object_r:port_t:s0 tclass=tcp_socket#看到这样一条日志,就知道是selinux阻止了同步 #现在将selinux的模式调成Permissive [root@redis ~]# getenforce Enforcing[root@redis ~]# setenforce 0[root@redis ~]# getenforce Permissive  设置完成以后,再次执行update,进入redis进行查看
12127.0.0.1:6379> get 1"ssss"  刷新一下刚刚的php界面
DSC0005.jpg

  到这里就基本算是大功告成了,只要application将数据写到mysql中,mysql触发器检测到更新,就会通过Gearman将数据同步到redis中。然后读取的话,就直接从redis中进行读取。当然这只是个实验环境,实际上还有很多细节要调整。
  七、GitHub上的一个有意思的工具
  地址:https://github.com/delano/redis-dump
  这个工具是用备份的redis的,也许你会问redis有自己的持久化,要这个工具干嘛?
  redis的自带的持久化具有局限性,假象我们需要redis回到过去的某个时刻去(回档)。redis自带的持久化要实现这个需求,办法就是不断的将dump文件或者aof文件移动到其他目录中去,不然它就会被新的持久化文件覆盖。
  而这个工具,就可以在任意时刻将数据库备份出来,非常方便。
12[root@redis ~]# yum -y install rubygems.noarch ruby-devel[root@redis ~]# gem install redis-dump  这样就安装完成了,使用方法到GitHub上去看,挺详细的。


运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-631279-1-1.html 上篇帖子: redis3在debian8.2下安装 下篇帖子: elk+redis centos6.6安装与配置
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表