Memcached 源码安装 与 配置
主机环境: CentOS 6.6 x86_64一,安装memcached
1,由于memcached依赖libevent 库,用它做Socket的处理,因此,我们需要安装libevent库,我这里就用yum来安装了.
1
yum install libevent
2,到官网下载memcached 的源码包. http://memcached.org
最新版是 v1.4.24
1
2
3
#wget
#tar xf memcached-1.4.24.tar.gz
#cd memcached-1.4.24
编译安装
1
2
# yum install cyrus-sasl-devel.x86_64
# ./configure--prefix=/usr/local/memcached_1.4.24 --enable-sasl
但是有报错
没有找到libevent库文件
1
# rpm -ql libevent
发现是安装到/usr/lib64 目录下的.
3,继续安装,,,,, 继续报错,, 算了,我们直接编译安装最新版 libevent 吧
libevent的官网是 http://libevent.org/
直接下载最新的
1
2
3
4
5
# wget
# tar xf libevent-2.0.22-stable.tar.gz
# cd libevent-2.0.22-stable
# ./configure --prefix=/usr/local/libevent_2.0.22
# make && make install
4,继续安装memcached
1
2
# ./configure--prefix=/usr/local/memcached_1.4.24 --enable-sasl --with-libevent=/usr/local/libevent_2.0.22/
# make && make install
5,安装完成后试运行下memcached 看有无报错
来看下安装后,的目录树
文件很少,可执行程序只有bin目录下的 memcached 一个,因此只能通过它来启动memcached服务.我们来看下memcached 命令的用法. 使用memcached -h 查看.
6, memcached参数详解
-p: 指定tcp协议的监听端口,默认11211
-U: 指定UDP协议的监听端口,默认也是11211
-s: 指定unix套接字路径,使用unix套接字来监听.
-a: 设置套接字的掩码.格式为八进制,默认0700
-l: 指定监听的网络地址.默认为0.0.0.0
-d: 将memcached作为守护进程,在后台运行.
-r: 内核文件的最大值限制.
-u: 指定memcached的运行身份.
-m: 指定用于存储缓存条目的最大内存值,单位为 MB (默认64MB)
-M: 始终不删除过期的旧数据,而是在内存耗尽过后直接报错.
-c: 限制同时的最大连接数.(默认 1024)
-k: 锁定所有分页内存.
注意:这里是一个限制值,限制了你可以锁定多少内存,如果分配了超过限定值的操作,将会失败.因此要针对启动memcached的用户进程正确的限制,而不是-u参数指定用户运行,在sh下,这个操作也可以使用 ulimit -S -l NUM_KB 来完成.对于一个大的缓存来说,这个有点危险,因此查看README文档和memcached主页去查看有关他的配置建议.
-v: 详细模式
-vv: 更详细,,
-vvv: 最详细,,
-h: 帮助信息.
-i: 打印memcached 和 libevent许可.
-P: 保存PID文件的路径及文件名,该参数只有在使用-d选项后才生效.
-f: 设置块(chunk)大小的增长因子,默认1.25
-n: 指定分配给key value flags 的最小空间. 默认48
-L: 尽量使用大内存页(如果有效的前提下).增加内存页的大小能够减少TLB失误数,并且能提高性能.为了能够从操作系统获取大的内存页,memcached将会分配所有的缓存条目到一个大的快(chunk)中.这种机制与所使用的操作系统有关,只有你的操作系统支持才有效.
-D: 使用<char>作为key前缀 和 ID的分隔符,用在状态报告中,默认的<char>是冒号 : ,如果使用该参数指定了分隔符,那么在状态收集中会自动打开,如果没有设置,那么需要向服务器发送 stats detail on 命令才会打开.
-t: 使用的线程数. 默认为4
-R: 通过该参数来设定一个限制值,定义每一个事件(event)请求的最大值,以便保护能够处理完成一个单独的客户端请求,一旦一个连接超过了这个值,那么memcached将会试图通过其他的连接来处理I/O.它的默认值为20
-C: 禁用CAS
-b: 设置等待(积压)队列的限制,默认1024
-B: 设置绑定的协议 --可选的有ascii,binary 或 auto(默认).
-I: 设定每一个块(slab)页的大小,默认的大小为1MB,最小为1KB,最大为128MB,调整这个值能够改变对缓存条目大小的限制.当心这个操作同样会增加slab的数目(使用-v来查看),并且会使用memcached的所有内存.
7,启动memcached
下面是启动memcached的两种方式.
第一种:
1
# ./memcached -u memcached -p 11211 -m 64m -vv
第二种方式:
1
# ./memcached -d -m 10 -u memcached -l 127.0.0.1 -p 11211 -c 50 -P /tmp/memcached.pid -vv
以下是输出内容:
slab class 1: chunk size 96 perslab 10922
slab class 2: chunk size 120 perslab 8738
slab class 3: chunk size 152 perslab 6898
.....
slab class40: chunk size 616944 perslab 1
slab class41: chunk size 771184 perslab 1
slab class42: chunk size 1048576 perslab 1
<26 server listening (auto-negotiate)
<27 send buffer was 124928, now 268435456
<28 server listening (udp)
<30 server listening (udp)
<29 server listening (udp)
<27 server listening (udp)
分析如下:
这里的slab就是相当于memcached提供的缓存,memcached服务器堆内存的分配单位就是slab,一个slab大小在默认情况下是1MB,而每一个slab又被分为若干个chunk,就像对磁盘或内存的使用一样一层一层的分割直到最小单位,而这里chunk就是最小的单位了,然后在这些chunk中保持我们缓存的条目 item,而chunk的大小也就完全一样了,因此,对于一个字节或者十个字节可能使用的chunk数目是一样多的,也就是说最少也存在着浪费.
还有一点需要说明的是,在每一个chunk中除了保存缓存条目的值(value)以外, 还有结构体, key .
图中chunk的增长大小就是因为有默认 -f 1.25的增长因子作用.
添加memcached可执行程序的软连接到系统PATH目录下
1
ln -s /usr/local/memcached_1.4.24/bin/memcached /usr/bin/
8,memcached的其他工具
在memcached的源码包中有一个scripts目录, 里面由一些自带的脚本和工具.
8.1, damemtop
该工具使用perl模块,如果以前没有安装过这些模块,那么只有安装过后才可以使用.
8.1.1, 安装perl相关模块
下面是AnyEventYAML TermReadKey 三个模块的安装.
1
# yum install perl perl-TermReadKey perl-YAML.noarch-y
# ./damemtop
YAML Error: Couldn't open /etc/damemtop.yaml for input:\n
Code: YAML_LOAD_ERR_FILE_INPUT
at ./damemtop line 543
运行脚本报错,, 提示需要/etc/damemtop.yaml 文件
那么可以吧scripts 目录下的 damemtop.yaml 复制到 /etc/ 目录下
分析配置文件 damemtop.yaml
这个文件的格式采用了YAML(是YAML Ain't a Markup Language的缩写).下面看一看配置文件内容:
做好必要的配置后,就可直接运行 damemtop 了
如图:
8.2 memcached-sysv服务脚本
顾名思义,该文件是个系统服务脚本.
1
2
# cp memcached.sysv /etc/init.d/memcached
# chkconfig --add memcached
查看服务脚本,由于我们的memcached是源码定制安装,所以需要注意脚本中的黑色字体部分,
#! /bin/sh
#
# chkconfig: - 55 45
# description:The memcached daemon is a network memory cache service.
# processname: memcached
# config: /etc/sysconfig/memcached
# Source function library.
. /etc/rc.d/init.d/functions
PORT=11211
USER=memcached
MAXCONN=1024
CACHESIZE=64
OPTIONS=""
if [ -f /etc/sysconfig/memcached ];then
. /etc/sysconfig/memcached
fi
# Check that networking is up.
if [ "$NETWORKING" = "no" ]
then
exit 0
fi
RETVAL=0
prog="memcached"
start () {
echo -n $"Starting $prog: "
# insure that /var/run/memcached has proper permissions
chown $USER /var/run/memcached
daemon memcached -d -p $PORT -u $USER-m $CACHESIZE -c $MAXCONN -P /var/run/memcached/memcached.pid $OPTIONS
RETVAL=$?
echo
[ $RETVAL -eq 0 ] && touch /var/lock/subsys/memcached
}
stop () {
echo -n $"Stopping $prog: "
killproc memcached
RETVAL=$?
echo
if [ $RETVAL -eq 0 ] ; then
rm -f /var/lock/subsys/memcached
rm -f /var/run/memcached.pid
fi
}
restart () {
stop
start
}
# See how we were called.
case "$1" in
start)
start
;;
stop)
stop
;;
status)
status memcached
;;
restart|reload)
restart
;;
condrestart)
[ -f /var/lock/subsys/memcached ] && restart || :
;;
*)
echo $"Usage: $0 {start|stop|status|restart|reload|condrestart}"
exit 1
esac
exit $?
1
2
3
# mkdir /var/run/memcached
# chown memcached:memcached /var/run/memcached
# service memcached restart //看能否正常重启和启动服务.
当然如配置文件所示,响应的参数可以单独写到 /etc/sysconfig/memcached 文件中,这样memcached的配置文件结构更清晰.
8.3,memcached-tool
memcached-tool 是基于perl 的脚本,使用前务必确认已经安装好perl
1
# ./memcached-tool //直接运行工具查看效果
执行没有参数的脚本后,会给出使用示例.
六种格式: (1.4.5版本之前只有四种格式,新版新增了 settings 和 sizes ,而且提示信息也明确说明了sizes命令是一个开发人员选项,实际生产环境并不推荐使用)
格式1: memcached-tool ip:port display
格式2: memcached-tool ip:port
这种方式同 格式1 是一种默认方式,它的默认参数为display
格式3: memcached-tool ip:port stats
限制详细信息,比如memcached版本号,进程pid号,libevent版本号,线程数,写入计数,错误计数,总连接数,当前连接数,,,,,,
格式4: memcached-tool ip:port dump
dump参数会将内存中现有的缓存对象即 键-值 转存出来.
例如: memcached-tool 127.0.0.1:11211 dump > memcached.txt
9 查看memcached服务的运行情况
telnet到memcached服务器后有很多的命令可以使用,如 add get set incr decr replace delete 等,, 除此之外还有一系列的获取服务器信息的命令,这部分命令都是以stats开头的.
memcached提供了许多命令,可以通过telnet工具来执行,当然你也可以使用PHP提供的Memcached::getStats($cmd) 来执行.
使用telnet 命令
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
# telnet 127.0.0.1 11211
Trying 127.0.0.1...
Connected to 127.0.0.1.
Escape character is '^]'.
stats
STAT pid 23736 //Memcached的进程pid
STAT uptime 1495 //服务从启动到现在所经过的时间,单位是秒
STAT time 1442132353 //服务器所在主机当前系统的时间,单位是秒
STAT version 1.4.24 //Memcached服务器的版本
STAT libevent 2.0.22-stable //Memcached服务器上libevent的版本
STAT pointer_size 64 //所在主机操作系统的指针大小,一般为32或6432位系统 64位系统
STAT rusage_user 0.018997 //进程累积使用的用户时间
STAT rusage_system 0.030995 //进程累积使用的系统时间
STAT curr_connections 10 //当前打开的连接数
STAT total_connections 36 //所有连接数
STAT connection_structures 11 //服务器分配的连接结构数
STAT reserved_fds 20 //misc fds使用数
STAT cmd_get 4 //执行get命令的总数
STAT cmd_set 2 //执行set命令的总数
STAT cmd_flush 0 //执行flush命令的总数
STAT cmd_touch 0 //执行touch次数，touch可以刷新过期时间
STAT get_hits 3 //get命令的命中次数
STAT get_misses 1 //get命令的失败次数
STAT delete_misses 0 //delete命令的失败次数
STAT delete_hits 0 //delete命令的命中次数
STAT incr_misses 0 //incr命令的失败次数
STAT incr_hits 0 //incr命令的命中次数
STAT decr_misses 0 //decr命令的失败次数
STAT decr_hits 0 //decr命令的命中次数
STAT cas_misses 0 //cas命令的失败次数
STAT cas_hits 0 //cas命令的命中次数
STAT cas_badval 0 //擦除坏数据值的次数
STAT touch_hits 0 //touch命令的命中次数
STAT touch_misses 0 //touch命令的失败次数
STAT auth_cmds 0 //authentication 执行的次数
STAT auth_errors 0 //authentication 执行失败的次数
STAT bytes_read 698 //服务器从网络上读取到的字节数
STAT bytes_written 15636 //服务器从网络上写入的字节数
STAT limit_maxbytes 67108864 //最大可用内存限制,就是在命令行中的 -m 值
STAT accepting_conns 1 //当前接受的连接数
STAT listen_disabled_num 0 //
STAT threads 4 //最大可用的线程数
STAT conn_yields 0 //memcached 启动至今有多少次打开的连接因为内部请求数达到 -R 参数指定的限值而被动放弃的
STAT hash_power_level 16 //hashpower的level，可以在启动的时候设置$ memcached -o hashpower=20
STAT hash_bytes 524288 //内存使用总量单位为byte
STAT hash_is_expanding 0 //是否正在扩大hash表
STAT malloc_fails 0 //
STAT bytes 72 //所有被存储条目的字节数
STAT curr_items 1 //当前缓存的条目数
STAT total_items 2 //缓存条目的总数
STAT expired_unfetched 0 //item过期之前没有被touch过，也就是放进去之后就没更新过过期时间的数目
STAT evicted_unfetched 0 //item替换覆盖之前没有被touch过，也就是放进去之后就没更新过过期时间的数目
STAT evictions 0 //为了给行的数据项目释放空间,而从缓存移除的缓存对象数目
STAT reclaimed 0 //memcached 启动至今有多少次在存储数据的时候使用了过期数据的空间
STAT crawler_reclaimed 0 //被检索器回收的数目
STAT crawler_items_checked 0 //
STAT lrutail_reflocked 0 //
END
页:
[1]