设为首页 收藏本站
查看: 810|回复: 0

[经验分享] memcached缓存mysql查询结果

[复制链接]

尚未签到

发表于 2018-9-27 12:33:23 | 显示全部楼层 |阅读模式
  介绍一个生产环境中memcached的使用场景,主要是memcached存储关系型数据库mysql的查询结果,比如网站的下载排名等,这种查询每次从关系型数据库中查询,会增加磁盘的I/O开销,而这个排名不需要实时的更新,所以我们把这个结果存在memcached中,memcached是把数据序列化存放在内存中,我们可以设置超时时间,然后周期性的从关系型数据库查询新的结果更新到memcached中。
  我用python来写个小的demo演示这个场景。首先python连接memcached和mysql需要加载对应的模块。程序的作用就是:先从memcached查询薪水最高的两个人,打印他们的姓名和薪水,如果没有返回结果,说明memcached中不存在,那么我们从关系型数据库mysql中去查询结果,然后更新在memcached中,再次请求,就会从memcached直接返回结果。
  安装python-memcached和MySQL-python包
  yum install -y python-memcached  MySQL-python
#!/usr/bin/python  
import sys
  
import MySQLdb
  
import memcache
  
memc = memcache.Client(['127.0.0.1:11211'], debug=1);
  
key = memc.get("top2salary")
  
if key != None:
  print "Load data from Memcache : %s,%s" % (key[0], key[1])
  
else:
  print "Updating memcached data from MySQL."
  
conn = MySQLdb.connect (host = "127.0.0.1",
  user = "root",
  passwd = "123456",
  db = "web_user")
  
cursor = conn.cursor()
  
cursor.execute('select * from emp order by salary desc limit 2')
  
rows = cursor.fetchall()
  
memc.set('top2salary',rows,10)
  mysql的emp表查询结果:
mysql> select * from emp;  
+--------------+--------+
  
| name         | salary |
  
+--------------+--------+
  
| Casillas     | 10500  |
  
| Fernández    | 350    |
  
| Varane       | 21000  |
  
| Pepe         | 16000  |
  
| Ramos        | 35000  |
  
| Nacho        | 4400   |
  
| Coentro      | 12500  |
  
| Marcelo      | 22000  |
  
| Carvajal     | 10500  |
  
| Arbeloa      | 6200   |
  
| Khedira      | 19500  |
  
| Casemiro     | 5300   |
  
| Xabi Alonso  | 10500  |
  
| Modric       | 35000  |
  
| Illarramendi | 16000  |
  
| Isco         | 31000  |
  
| Bale         | 70500  |
  
| Di María     | 26500  |
  
| Ronaldo      | 88000  |
  
| Jesé         | 13000  |
  
| Benzema      | 30000  |
  
| Morata       | 10500  |
  
+--------------+--------+
  
22 rows in set (0.00 sec)
  查询当前薪水排名的两人,第一次执行memcached为空,立刻去myql中查询,缓存在memcached,再次查都是从memcached返回,我在代码里设置超时时间10秒,10秒后清除缓存再次从mysql查询,如果这个时间段内mysql有新的数据变化,如插入更高薪水的人,那么会返回当前最新的结果,一般mysql被缓存在memcached中都是变化不太频繁的结果。
[root@localhost ~]# ./memc.py  
Updating memcached data from MySQL.
  
[root@localhost ~]# ./memc.py
  
Load data from Memcache : ('Ronaldo', '88000'),('Bale', '70500')
  
[root@localhost ~]# ./memc.py
  
Load data from Memcache : ('Ronaldo', '88000'),('Bale', '70500')
  
[root@localhost ~]# ./memc.py
  
Load data from Memcache : ('Ronaldo', '88000'),('Bale', '70500')
  优点如果加载网页每次都查询mysql而且执行order by这样的sql语句对数据库的I/O负载增加,同时会减慢打开页面的速度。



运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-602819-1-1.html 上篇帖子: Mysql数据库UDF的安全问题利用 下篇帖子: Amoeba新版本MYSQL读写分离配置
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表