memcached的部署与nosql介绍

chenkehao

　　一. 基础知识NoSQL == "not only sql"
　　关系型数据库和nosql比较  http://my.oschina.net/u/1426212/blog/370498
　　常见的关系型数据库：mysql，oracle，sqlserver
　　关系型数据库涉及联合查询（join），数据量大的时候查询会锁表变慢
　　NoSQL数据之间无关系，可以随意扩展
　　NoSQL数据存储简单，而且可以存在内存中，所以读写速度非常快，即时数据量很大也很快
　　NoSQL不需要建立表，字段等数据，他可以随时存储自定义格式，而关系型数据库增，改字段非常麻烦，尤其是数据量非常大的情况下，就更麻烦了
　　NoSQL不需要建立表，字段，增加数据非常方便
　　常见NoSQL
　　键值（Key-Value）数据库 产品：redis，memcached，riak
　　redis、memcached数据键值数据库，适合储存用户信息，比如会话，配置文件，参数，购物车等等。这些信息一般都和ID（键）挂钩，这种情形下键值数据库是个很好的选择。
　　面向文档（Document-Oriented）数据库  将数据以文档的形式存储。每个文档都是一系列数据项的集合。每个数据项都有一个名称与对应的值，值既可以是简单的数据类型，如字符串，数字和日期等；也可以是复杂的类型，如有序列表和关联对象。数据存储的最小单位是文档，同一个表表中的文档属性可以是不同的，数据可以使用XML,JSON或者JSONB等多种形式存储。
　　列存储-数据库   产品： Cassandra，HBase
　　图-数据库产品：Neo4J，lnfinite Graph，OrientDB
　　Memcahed介绍
　　是国外社区网站LiveJournal团队开发，通过缓存数据库查询结果，减少数据库访问次数，从而提高动态web站点性能。官方站点 http://memcached.org/
　　memcached特点
　　?基于C/S架构，协议简单
　　?基于libevent 的事件处理
　　?自主内存存储处理
　　?存储方式为slab allocation
　　Slab Allocation的原理——将分配的内存分割成各种尺寸的块（chunk）， 并把尺寸相同的块分成组（chunk的集合），每个chunk集合被称为slab。
　　Memcached的内存分配以Page为单位，Page默认值为1M，可以在启动时通过-I参数来指定。
　　Slab是由多个Page组成的，Page按照指定大小切割成多个chunk。
　　?数据过期方式:Lazy Expiration和LRU
　　? Lazy Expiration
　　memcached 内部不会监视记录是否过期，而是在get时查看记录的时间戳，检查记录是否过期。这种技术被称为lazy（惰性）expiration。因此，memcached不会在过期监视上耗费CPU时间。
　　? LRU

　　memcached会优先使用已超时的记录的空间，但即使如此，也会发生追加新记录时空间不足的情况，此时就要使用名为Least Recently Used（LRU）机制来分配空间。顾名思义，这是删除“最近最少使用”的记录的机制。因此，当内存空间不足时（无法从slab>　　memcached安装和使用
　　yum install -y epel-release（安装扩展源）
　　yum install -y libevent  memcached  libmemcached
　　启动命令：
　　/etc/init.d/memcached start
　　查看进程
　　ps aux |grep memcached
　　默认监听127.0.0.1:11211，默认使用内存64M，这个数值可以调节
　　vim /etc/sysconfig/memcached
　　调整CACHESIZE
　　运行Memcached时的启动参数
　　-d选项是启动一个守护进程
　　-m是分配给Memcache使用的内存数量，单位是MB，这里是200MB
　　-u是运行Memcache的用户，如果当前为 root 的话，需要使用此参数指定用户。
　　-l是监听的服务器IP地址
　　-p是设置Memcache监听的端口，默认是11211
　　-c选项是最大运行的并发连接数，默认是1024
　　-P是设置保存Memcache的pid文件
　　查看memcached运行状态：
　　memcached-tool 127.0.0.1:11211  stats（会显示很多参数出来。cmd_get/get_hits=命中率，要在百分之八十以上次memcached才是不错的）
　　或者echo stats |nc 127.0.0.1 11211  （需要安装nc工具  yum install -y nc）
　　若安装libmemcached后，可以使用命令
　　memstat --servers=127.0.0.1:11211 查看memcached服务状态
　　命令行用法：
　　telnet  127.0.0.1 11211
　　set key2 0 60 3
　　abc
　　STORED
　　get key2
　　VALUE key2 0 3
　　abc
　　END
　　语法规则
　　    \r\n \r\n
　　注：\r\n在windows下是Enter键
　　a)  可以是”set”, “add”, “replace”。
　　“set”表示按照相应的存储该数据，没有的时候增加，有的覆盖。
　　“add”表示按照相应的添加该数据,但是如果该已经存在则会操作失败。
　　“replace”表示按照相应的替换数据,但是如果该不存在则操作失败。
　　有时“add”，“replace”也会存储不上。
　　b)  客户端需要保存数据的key。
　　c)  是一个16位的无符号的整数(以十进制的方式表示)。
　　该标志将和需要存储的数据一起存储,并在客户端get数据时返回。
　　客户可以将此标志用做特殊用途，此标志对服务器来说是不透明的。
　　d)  过期的时间。
　　若为0表示存储的数据永远不过时(但可被服务器算法：LRU 等替换)。
　　如果非0(unix时间或者距离此时的秒数),当过期后,服务器可以保证用户得不到该数据(以服务器时间为标准)。
　　e)  需要存储的字节数，当用户希望存储空数据时可以为0
　　f) 需要存储的内容，输入完成后，最后客户端需要加上”\r\n”（windows直接点击Enter）作为”命令头”的结束标志。
　　参考资料
　　memcached常用命令   http://www.cnblogs.com/jeffwongishandsome/archive/2011/11/06/2238265.html
　　php连接使用memcached
　　首先需要安装php的memcache扩展
　　可以使用php自带的pecl安装程序
　　# /usr/local/php/bin/pecl install memcache
　　也可以从源码安装
　　# wget  http://www.lishiming.net/data/attachment/forum/memcache-2.2.3.tgz
　　# tar zxf memcache-2.2.3.tgz
　　# cd memcache-2.2.3
　　# /usr/local/php/bin/phpize
　　# ../configure --with-php-config=/usr/local/php/bin/php-config
　　# make && make install
　　安装完后会有类似这样的提示：
　　Installing shared extensions: /usr/local/servers/php5/lib/php/extensions/no-debug-non-zts-20060922/
　　把这个记住，然后修改php.ini，把
　　extension_dir = "./"
　　修改为
　　extension_dir = "/usr/local/servers/php5/lib/php/extensions/no-debug-non-zts-20060922/"
　　并添加一行
　　extension="memcache.so"
　　检验
　　# /usr/local/php/bin/php -m（看看是否有mamcache模块）
　　测试php脚本
　　wget www.apelearn.com/study_v2/.memcache.txt
　　mv .memcache.txt   test.php
　　/usr/local/php/bin/php test.php
　　附件：http://www.apelearn.com/bbs/thread-8660-1-1.html
　　扩展学习
　　maget搭建memcached集群  http://blog.snsgou.com/post-800.html
　　memcached get all keys方法  http://www.aikaiyuan.com/6433.html
　　Memcached实现session共享
　　http://blog.csdn.net/ikscher/article/details/7014992