chenkehao 发表于 2018-12-25 12:12:57

memcached的部署与nosql介绍

  一. 基础知识NoSQL == "not only sql"
  关系型数据库和nosql比较http://my.oschina.net/u/1426212/blog/370498
  常见的关系型数据库:mysql,oracle,sqlserver
  关系型数据库涉及联合查询(join),数据量大的时候查询会锁表变慢
  NoSQL数据之间无关系,可以随意扩展
  NoSQL数据存储简单,而且可以存在内存中,所以读写速度非常快,即时数据量很大也很快
  NoSQL不需要建立表,字段等数据,他可以随时存储自定义格式,而关系型数据库增,改字段非常麻烦,尤其是数据量非常大的情况下,就更麻烦了
  NoSQL不需要建立表,字段,增加数据非常方便
  常见NoSQL
  键值(Key-Value)数据库 产品:redis,memcached,riak
  redis、memcached数据键值数据库,适合储存用户信息,比如会话,配置文件,参数,购物车等等。这些信息一般都和ID(键)挂钩,这种情形下键值数据库是个很好的选择。
  面向文档(Document-Oriented)数据库将数据以文档的形式存储。每个文档都是一系列数据项的集合。每个数据项都有一个名称与对应的值,值既可以是简单的数据类型,如字符串,数字和日期等;也可以是复杂的类型,如有序列表和关联对象。数据存储的最小单位是文档,同一个表表中的文档属性可以是不同的,数据可以使用XML,JSON或者JSONB等多种形式存储。
  列存储-数据库   产品: Cassandra,HBase
  图-数据库产品:Neo4J,lnfinite Graph,OrientDB
  Memcahed介绍
  是国外社区网站LiveJournal团队开发,通过缓存数据库查询结果,减少数据库访问次数,从而提高动态web站点性能。官方站点 http://memcached.org/
  memcached特点
  ?基于C/S架构,协议简单
  ?基于libevent 的事件处理
  ?自主内存存储处理
  ?存储方式为slab allocation
  Slab Allocation的原理——将分配的内存分割成各种尺寸的块(chunk), 并把尺寸相同的块分成组(chunk的集合),每个chunk集合被称为slab。
  Memcached的内存分配以Page为单位,Page默认值为1M,可以在启动时通过-I参数来指定。
  Slab是由多个Page组成的,Page按照指定大小切割成多个chunk。
  ?数据过期方式:Lazy Expiration和LRU
  ? Lazy Expiration
  memcached 内部不会监视记录是否过期,而是在get时查看记录的时间戳,检查记录是否过期。这种技术被称为lazy(惰性)expiration。因此,memcached不会在过期监视上耗费CPU时间。
  ? LRU

  memcached会优先使用已超时的记录的空间,但即使如此,也会发生追加新记录时空间不足的情况,此时就要使用名为Least Recently Used(LRU)机制来分配空间。顾名思义,这是删除“最近最少使用”的记录的机制。因此,当内存空间不足时(无法从slab>  memcached安装和使用
  yum install -y epel-release(安装扩展源)
  yum install -y libeventmemcachedlibmemcached
  启动命令:
  /etc/init.d/memcached start
  查看进程
  ps aux |grep memcached
  默认监听127.0.0.1:11211,默认使用内存64M,这个数值可以调节
  vim /etc/sysconfig/memcached
  调整CACHESIZE
  运行Memcached时的启动参数
  -d选项是启动一个守护进程
  -m是分配给Memcache使用的内存数量,单位是MB,这里是200MB
  -u是运行Memcache的用户,如果当前为 root 的话,需要使用此参数指定用户。
  -l是监听的服务器IP地址
  -p是设置Memcache监听的端口,默认是11211
  -c选项是最大运行的并发连接数,默认是1024
  -P是设置保存Memcache的pid文件
  查看memcached运行状态:
  memcached-tool 127.0.0.1:11211stats(会显示很多参数出来。cmd_get/get_hits=命中率,要在百分之八十以上次memcached才是不错的)
  或者echo stats |nc 127.0.0.1 11211(需要安装nc工具yum install -y nc)
  若安装libmemcached后,可以使用命令
  memstat --servers=127.0.0.1:11211 查看memcached服务状态
  命令行用法:
  telnet127.0.0.1 11211
  set key2 0 60 3
  abc
  STORED
  get key2
  VALUE key2 0 3
  abc
  END
  语法规则
      \r\n \r\n
  注:\r\n在windows下是Enter键
  a)可以是”set”, “add”, “replace”。
  “set”表示按照相应的存储该数据,没有的时候增加,有的覆盖。
  “add”表示按照相应的添加该数据,但是如果该已经存在则会操作失败。
  “replace”表示按照相应的替换数据,但是如果该不存在则操作失败。
  有时“add”,“replace”也会存储不上。
  b)客户端需要保存数据的key。
  c)是一个16位的无符号的整数(以十进制的方式表示)。
  该标志将和需要存储的数据一起存储,并在客户端get数据时返回。
  客户可以将此标志用做特殊用途,此标志对服务器来说是不透明的。
  d)过期的时间。
  若为0表示存储的数据永远不过时(但可被服务器算法:LRU 等替换)。
  如果非0(unix时间或者距离此时的秒数),当过期后,服务器可以保证用户得不到该数据(以服务器时间为标准)。
  e)需要存储的字节数,当用户希望存储空数据时可以为0
  f) 需要存储的内容,输入完成后,最后客户端需要加上”\r\n”(windows直接点击Enter)作为”命令头”的结束标志。
  参考资料
  memcached常用命令   http://www.cnblogs.com/jeffwongishandsome/archive/2011/11/06/2238265.html
  php连接使用memcached
  首先需要安装php的memcache扩展
  可以使用php自带的pecl安装程序
  # /usr/local/php/bin/pecl install memcache
  也可以从源码安装
  # wgethttp://www.lishiming.net/data/attachment/forum/memcache-2.2.3.tgz
  # tar zxf memcache-2.2.3.tgz
  # cd memcache-2.2.3
  # /usr/local/php/bin/phpize
  # ../configure --with-php-config=/usr/local/php/bin/php-config
  # make && make install
  安装完后会有类似这样的提示:
  Installing shared extensions: /usr/local/servers/php5/lib/php/extensions/no-debug-non-zts-20060922/
  把这个记住,然后修改php.ini,把
  extension_dir = "./"
  修改为
  extension_dir = "/usr/local/servers/php5/lib/php/extensions/no-debug-non-zts-20060922/"
  并添加一行
  extension="memcache.so"
  检验
  # /usr/local/php/bin/php -m(看看是否有mamcache模块)
  测试php脚本
  wget www.apelearn.com/study_v2/.memcache.txt
  mv .memcache.txt   test.php
  /usr/local/php/bin/php test.php
  附件:http://www.apelearn.com/bbs/thread-8660-1-1.html
  扩展学习
  maget搭建memcached集群http://blog.snsgou.com/post-800.html
  memcached get all keys方法http://www.aikaiyuan.com/6433.html
  Memcached实现session共享
  http://blog.csdn.net/ikscher/article/details/7014992

页: [1]
查看完整版本: memcached的部署与nosql介绍