memcached的部署与nosql介绍
一. 基础知识NoSQL == "not only sql"关系型数据库和nosql比较http://my.oschina.net/u/1426212/blog/370498
常见的关系型数据库:mysql,oracle,sqlserver
关系型数据库涉及联合查询(join),数据量大的时候查询会锁表变慢
NoSQL数据之间无关系,可以随意扩展
NoSQL数据存储简单,而且可以存在内存中,所以读写速度非常快,即时数据量很大也很快
NoSQL不需要建立表,字段等数据,他可以随时存储自定义格式,而关系型数据库增,改字段非常麻烦,尤其是数据量非常大的情况下,就更麻烦了
NoSQL不需要建立表,字段,增加数据非常方便
常见NoSQL
键值(Key-Value)数据库 产品:redis,memcached,riak
redis、memcached数据键值数据库,适合储存用户信息,比如会话,配置文件,参数,购物车等等。这些信息一般都和ID(键)挂钩,这种情形下键值数据库是个很好的选择。
面向文档(Document-Oriented)数据库将数据以文档的形式存储。每个文档都是一系列数据项的集合。每个数据项都有一个名称与对应的值,值既可以是简单的数据类型,如字符串,数字和日期等;也可以是复杂的类型,如有序列表和关联对象。数据存储的最小单位是文档,同一个表表中的文档属性可以是不同的,数据可以使用XML,JSON或者JSONB等多种形式存储。
列存储-数据库 产品: Cassandra,HBase
图-数据库产品:Neo4J,lnfinite Graph,OrientDB
Memcahed介绍
是国外社区网站LiveJournal团队开发,通过缓存数据库查询结果,减少数据库访问次数,从而提高动态web站点性能。官方站点 http://memcached.org/
memcached特点
?基于C/S架构,协议简单
?基于libevent 的事件处理
?自主内存存储处理
?存储方式为slab allocation
Slab Allocation的原理——将分配的内存分割成各种尺寸的块(chunk), 并把尺寸相同的块分成组(chunk的集合),每个chunk集合被称为slab。
Memcached的内存分配以Page为单位,Page默认值为1M,可以在启动时通过-I参数来指定。
Slab是由多个Page组成的,Page按照指定大小切割成多个chunk。
?数据过期方式:Lazy Expiration和LRU
? Lazy Expiration
memcached 内部不会监视记录是否过期,而是在get时查看记录的时间戳,检查记录是否过期。这种技术被称为lazy(惰性)expiration。因此,memcached不会在过期监视上耗费CPU时间。
? LRU
memcached会优先使用已超时的记录的空间,但即使如此,也会发生追加新记录时空间不足的情况,此时就要使用名为Least Recently Used(LRU)机制来分配空间。顾名思义,这是删除“最近最少使用”的记录的机制。因此,当内存空间不足时(无法从slab> memcached安装和使用
yum install -y epel-release(安装扩展源)
yum install -y libeventmemcachedlibmemcached
启动命令:
/etc/init.d/memcached start
查看进程
ps aux |grep memcached
默认监听127.0.0.1:11211,默认使用内存64M,这个数值可以调节
vim /etc/sysconfig/memcached
调整CACHESIZE
运行Memcached时的启动参数
-d选项是启动一个守护进程
-m是分配给Memcache使用的内存数量,单位是MB,这里是200MB
-u是运行Memcache的用户,如果当前为 root 的话,需要使用此参数指定用户。
-l是监听的服务器IP地址
-p是设置Memcache监听的端口,默认是11211
-c选项是最大运行的并发连接数,默认是1024
-P是设置保存Memcache的pid文件
查看memcached运行状态:
memcached-tool 127.0.0.1:11211stats(会显示很多参数出来。cmd_get/get_hits=命中率,要在百分之八十以上次memcached才是不错的)
或者echo stats |nc 127.0.0.1 11211(需要安装nc工具yum install -y nc)
若安装libmemcached后,可以使用命令
memstat --servers=127.0.0.1:11211 查看memcached服务状态
命令行用法:
telnet127.0.0.1 11211
set key2 0 60 3
abc
STORED
get key2
VALUE key2 0 3
abc
END
语法规则
\r\n \r\n
注:\r\n在windows下是Enter键
a)可以是”set”, “add”, “replace”。
“set”表示按照相应的存储该数据,没有的时候增加,有的覆盖。
“add”表示按照相应的添加该数据,但是如果该已经存在则会操作失败。
“replace”表示按照相应的替换数据,但是如果该不存在则操作失败。
有时“add”,“replace”也会存储不上。
b)客户端需要保存数据的key。
c)是一个16位的无符号的整数(以十进制的方式表示)。
该标志将和需要存储的数据一起存储,并在客户端get数据时返回。
客户可以将此标志用做特殊用途,此标志对服务器来说是不透明的。
d)过期的时间。
若为0表示存储的数据永远不过时(但可被服务器算法:LRU 等替换)。
如果非0(unix时间或者距离此时的秒数),当过期后,服务器可以保证用户得不到该数据(以服务器时间为标准)。
e)需要存储的字节数,当用户希望存储空数据时可以为0
f) 需要存储的内容,输入完成后,最后客户端需要加上”\r\n”(windows直接点击Enter)作为”命令头”的结束标志。
参考资料
memcached常用命令 http://www.cnblogs.com/jeffwongishandsome/archive/2011/11/06/2238265.html
php连接使用memcached
首先需要安装php的memcache扩展
可以使用php自带的pecl安装程序
# /usr/local/php/bin/pecl install memcache
也可以从源码安装
# wgethttp://www.lishiming.net/data/attachment/forum/memcache-2.2.3.tgz
# tar zxf memcache-2.2.3.tgz
# cd memcache-2.2.3
# /usr/local/php/bin/phpize
# ../configure --with-php-config=/usr/local/php/bin/php-config
# make && make install
安装完后会有类似这样的提示:
Installing shared extensions: /usr/local/servers/php5/lib/php/extensions/no-debug-non-zts-20060922/
把这个记住,然后修改php.ini,把
extension_dir = "./"
修改为
extension_dir = "/usr/local/servers/php5/lib/php/extensions/no-debug-non-zts-20060922/"
并添加一行
extension="memcache.so"
检验
# /usr/local/php/bin/php -m(看看是否有mamcache模块)
测试php脚本
wget www.apelearn.com/study_v2/.memcache.txt
mv .memcache.txt test.php
/usr/local/php/bin/php test.php
附件:http://www.apelearn.com/bbs/thread-8660-1-1.html
扩展学习
maget搭建memcached集群http://blog.snsgou.com/post-800.html
memcached get all keys方法http://www.aikaiyuan.com/6433.html
Memcached实现session共享
http://blog.csdn.net/ikscher/article/details/7014992
页:
[1]