CentOS 6.6下Memcached 源码安装配置

主机环境: CentOS 6.6 x86_64

一,安装Memcached

1,由于Memcached依赖libevent 库,用它做Socket的处理,因此,我们需要安装libevent库,我这里就用yum来安装了.

yum install libevent

2,到官网下载memcached 的源码包.  http://memcached.org

最新版是 v1.4.24 

#wget

#tar xf  memcached-1.4.24.tar.gz

#cd memcached-1.4.24

编译安装

# yum install cyrus-sasl-devel.x86_64 

# ./configure  --prefix=/usr/local/memcached_1.4.24 --enable-sasl

但是有报错

没有找到libevent库文件

# rpm -ql libevent

发现是安装到/usr/lib64 目录下的.

3,继续安装,,,,,  继续报错,, 算了,我们直接编译安装最新版 libevent 吧

libevent的官网是 http://libevent.org/

直接下载最新的

# wget

# tar xf libevent-2.0.22-stable.tar.gz

# cd libevent-2.0.22-stable

# ./configure --prefix=/usr/local/libevent_2.0.22

# make && make install

4,继续安装memcached

# ./configure  --prefix=/usr/local/memcached_1.4.24 --enable-sasl --with-libevent=/usr/local/libevent_2.0.22/

# make && make install

5,安装完成后  试运行下memcached 看有无报错

来看下安装后,的目录树

文件很少,可执行程序只有bin目录下的 memcached 一个,因此只能通过它来启动memcached服务.我们来看下memcached 命令的用法. 使用memcached -h 查看.

6, memcached参数详解

-p: 指定tcp协议的监听端口,默认11211

-U: 指定UDP协议的监听端口,默认也是11211

-s: 指定unix套接字路径,使用unix套接字来监听.

-a: 设置套接字的掩码.格式为八进制,默认0700

-l: 指定监听的网络地址.默认为0.0.0.0

-d: 将memcached作为守护进程,在后台运行.

-r: 内核文件的最大值限制.

-u: 指定memcached的运行身份.

-m: 指定用于存储缓存条目的最大内存值,单位为 MB (默认64MB)

-M: 始终不删除过期的旧数据,而是在内存耗尽过后直接报错.

-c: 限制同时的最大连接数.(默认 1024)

-k: 锁定所有分页内存.

注意:这里是一个限制值,限制了你可以锁定多少内存,如果分配了超过限定值的操作,将会失败.因此要针对启动memcached的用户进程正确的限制,而不是-u参数指定用户运行,在sh下,这个操作也可以使用 ulimit -S -l NUM_KB 来完成.对于一个大的缓存来说,这个有点危险,因此查看README文档和memcached主页去查看有关他的配置建议.

-v: 详细模式

-vv: 更详细,,

-vvv: 最详细,,

-h: 帮助信息.

-i: 打印memcached 和 libevent许可.

-P: 保存PID文件的路径及文件名,该参数只有在使用-d选项后才生效.

-f: 设置块(chunk)大小的增长因子,默认1.25

-n: 指定分配给key value flags 的最小空间. 默认48

-L: 尽量使用大内存页(如果有效的前提下).增加内存页的大小能够减少TLB失误数,并且能提高性能.为了能够从操作系统获取大的内存页,memcached将会分配所有的缓存条目到一个大的快(chunk)中.这种机制与所使用的操作系统有关,只有你的操作系统支持才有效.

-D: 使用<char>作为key前缀 和 ID的分隔符,用在状态报告中,默认的<char>是冒号 : ,如果使用该参数指定了分隔符,那么在状态收集中会自动打开,如果没有设置,那么需要向服务器发送 stats detail on 命令才会打开.

-t: 使用的线程数. 默认为4

-R: 通过该参数来设定一个限制值,定义每一个事件(event)请求的最大值,以便保护能够处理完成一个单独的客户端请求,一旦一个连接超过了这个值,那么memcached将会试图通过其他的连接来处理I/O.它的默认值为20

-C: 禁用CAS

-b: 设置等待(积压)队列的限制,默认1024

-B: 设置绑定的协议 --可选的有ascii,binary 或 auto(默认).

-I: 设定每一个块(slab)页的大小,默认的大小为1MB,最小为1KB,最大为128MB,调整这个值能够改变对缓存条目大小的限制.当心这个操作同样会增加slab的数目(使用-v来查看),并且会使用memcached的所有内存.

7,启动memcached

下面是启动memcached的两种方式.

第一种:

# ./memcached -u memcached -p 11211 -m 64m -vv

第二种方式:

# ./memcached -d -m 10 -u memcached -l 127.0.0.1 -p 11211 -c 50 -P /tmp/memcached.pid -vv

以下是输出内容:

slab class  1: chunk size        96 perslab  10922

slab class  2: chunk size      120 perslab    8738

slab class  3: chunk size      152 perslab    6898

.....

slab class  40: chunk size    616944 perslab      1

slab class  41: chunk size    771184 perslab      1

slab class  42: chunk size  1048576 perslab      1

<26 server listening (auto-negotiate)

<27 send buffer was 124928, now 268435456

<28 server listening (udp)

<30 server listening (udp)

<29 server listening (udp)

<27 server listening (udp)

分析如下:

这里的slab就是相当于memcached提供的缓存,memcached服务器堆内存的分配单位就是slab,一个slab大小在默认情况下是1MB,而每一个slab又被分为若干个chunk,就像对磁盘或内存的使用一样一层一层的分割直到最小单位,而这里chunk就是最小的单位了,然后在这些chunk中保持我们缓存的条目 item,而chunk的大小也就完全一样了,因此,对于一个字节或者十个字节可能使用的chunk数目是一样多的,也就是说最少也存在着浪费.

还有一点需要说明的是,在每一个chunk中除了保存缓存条目的值(value)以外, 还有结构体, key .

图中chunk的增长大小就是因为有默认 -f 1.25的增长因子作用.

添加memcached可执行程序的软连接到系统PATH目录下

ln -s /usr/local/memcached_1.4.24/bin/memcached /usr/bin/

8,memcached的其他工具

在memcached的源码包中有一个scripts目录, 里面由一些自带的脚本和工具.

8.1, damemtop

  该工具使用perl模块,如果以前没有安装过这些模块,那么只有安装过后才可以使用.

8.1.1, 安装perl相关模块

  下面是AnyEvent  YAML  TermReadKey 三个模块的安装.

# yum install perl perl-TermReadKey perl-YAML.noarch  -y

# ./damemtop

YAML Error: Couldn't open /etc/damemtop.yaml for input:\n

  Code: YAML_LOAD_ERR_FILE_INPUT

at ./damemtop line 543

运行脚本报错,,  提示需要/etc/damemtop.yaml 文件

那么可以吧scripts 目录下的 damemtop.yaml 复制到 /etc/ 目录下

分析配置文件 damemtop.yaml

这个文件的格式采用了YAML(是YAML Ain't a Markup Language的缩写).下面看一看配置文件内容:

做好必要的配置后,就可直接运行 damemtop 了

如图:

8.2 memcached-sysv服务脚本

顾名思义,该文件是个系统服务脚本.

# cp memcached.sysv /etc/init.d/memcached

# chkconfig --add memcached

查看服务脚本,由于我们的memcached是源码定制安装,所以需要注意脚本中的黑色字体部分,

#! /bin/sh

#

# chkconfig: - 55 45

# description:  The memcached daemon is a network memory cache service.

# processname: memcached

# config: /etc/sysconfig/memcached

# Source function library.

. /etc/rc.d/init.d/functions

PORT=11211

USER=memcached

MAXCONN=1024

CACHESIZE=64

OPTIONS=""

if [ -f /etc/sysconfig/memcached ];then

  . /etc/sysconfig/memcached

fi

# Check that networking is up.

if [ "$NETWORKING" = "no" ]

then

  exit 0

fi

RETVAL=0

prog="memcached"

start () {

  echo -n $"Starting $prog: "

  # insure that /var/run/memcached has proper permissions

  chown $USER /var/run/memcached

  daemon memcached -d -p $PORT -u $USER  -m $CACHESIZE -c $MAXCONN -P /var/run/memcached/memcached.pid $OPTIONS

  RETVAL=$?

  echo

  [ $RETVAL -eq 0 ] && touch /var/lock/subsys/memcached

}

stop () {

  echo -n $"Stopping $prog: "

  killproc memcached

  RETVAL=$?

  echo

  if [ $RETVAL -eq 0 ] ; then

      rm -f /var/lock/subsys/memcached

      rm -f /var/run/memcached.pid

  fi

}

restart () {

  stop

  start

}

# See how we were called.

case "$1" in

  start)

      start

      ;;

  stop)

  stop

  ;;

  status)

  status memcached

  ;;

  restart|reload)

  restart

  ;;

  condrestart)

  [ -f /var/lock/subsys/memcached ] && restart || :

  ;;

  *)

  echo $"Usage: $0 {start|stop|status|restart|reload|condrestart}"

  exit 1

esac

exit $?

---------------------------------------------

# mkdir /var/run/memcached

# chown memcached:memcached /var/run/memcached

# service memcached restart  //看能否正常重启和启动服务.

当然如配置文件所示,响应的参数可以单独写到 /etc/sysconfig/memcached 文件中,这样memcached的配置文件结构更清晰.

8.3,  memcached-tool

memcached-tool 是基于perl 的脚本,使用前务必确认已经安装好perl

# ./memcached-tool  //直接运行工具查看效果

执行没有参数的脚本后,会给出使用示例.

六种格式: (1.4.5版本之前只有四种格式,新版新增了 settings 和 sizes ,而且提示信息也明确说明了sizes命令是一个开发人员选项,实际生产环境并不推荐使用)

格式1: memcached-tool ip:port display

格式2: memcached-tool ip:port

这种方式同 格式1 是一种默认方式,它的默认参数为display

格式3: memcached-tool ip:port stats

限制详细信息,比如memcached版本号,进程pid号,libevent版本号,线程数,写入计数,错误计数,总连接数,当前连接数,,,,,,

格式4: memcached-tool ip:port dump

dump参数会将内存中现有的缓存对象即 键-值 转存出来.

例如: memcached-tool 127.0.0.1:11211 dump > memcached.txt

9 查看memcached服务的运行情况

telnet到memcached服务器后有很多的命令可以使用,如 add get set incr decr replace delete 等,, 除此之外还有一系列的获取服务器信息的命令,这部分命令都是以stats开头的.

memcached提供了许多命令,可以通过telnet工具来执行,当然你也可以使用PHP提供的Memcached::getStats($cmd) 来执行.

使用telnet 命令

[root@_212 scripts]# telnet 127.0.0.1 11211

Trying 127.0.0.1...

Connected to 127.0.0.1.

Escape character is '^]'.

stats

STAT pid 23736                //Memcached的进程pid

STAT uptime 1495                    //服务从启动到现在所经过的时间,单位是秒

STAT time 1442132353                //服务器所在主机当前系统的时间,单位是秒

STAT version 1.4.24                  //Memcached服务器的版本

STAT libevent 2.0.22-stable          //Memcached服务器上libevent的版本

STAT pointer_size 64                //所在主机操作系统的指针大小,一般为32或64  32位系统 64位系统

STAT rusage_user 0.018997            //进程累积使用的用户时间

STAT rusage_system 0.030995          //进程累积使用的系统时间

STAT curr_connections 10            //当前打开的连接数

STAT total_connections 36            //所有连接数

STAT connection_structures 11        //服务器分配的连接结构数

STAT reserved_fds 20                //misc fds使用数

STAT cmd_get 4                      //执行get命令的总数

STAT cmd_set 2                      //执行set命令的总数

STAT cmd_flush 0                    //执行flush命令的总数

STAT cmd_touch 0                    //执行touch次数，touch可以刷新过期时间

STAT get_hits 3                      //get命令的命中次数

STAT get_misses 1                    //get命令的失败次数

STAT delete_misses 0                //delete命令的失败次数

STAT delete_hits 0                  //delete命令的命中次数

STAT incr_misses 0                  //incr命令的失败次数

STAT incr_hits 0                    //incr命令的命中次数

STAT decr_misses 0                  //decr命令的失败次数

STAT decr_hits 0                    //decr命令的命中次数

STAT cas_misses 0                    //cas命令的失败次数

STAT cas_hits 0                      //cas命令的命中次数

STAT cas_badval 0                    //擦除坏数据值的次数

STAT touch_hits 0                    //touch命令的命中次数

STAT touch_misses 0                  //touch命令的失败次数

STAT auth_cmds 0                    //authentication 执行的次数

STAT auth_errors 0                  //authentication 执行失败的次数

STAT bytes_read 698                  //服务器从网络上读取到的字节数 

STAT bytes_written 15636            //服务器从网络上写入的字节数 

STAT limit_maxbytes 67108864        //最大可用内存限制,就是在命令行中的 -m 值

STAT accepting_conns 1              //当前接受的连接数

STAT listen_disabled_num 0          //

STAT threads 4                      //最大可用的线程数

STAT conn_yields 0                  //memcached 启动至今有多少次打开的连接因为内部请求数达到 -R 参数指定的限值而被动放弃的

STAT hash_power_level 16            //hashpower的level，可以在启动的时候设置$ memcached -o hashpower=20

STAT hash_bytes 524288              //内存使用总量单位为byte

STAT hash_is_expanding 0            //是否正在扩大hash表

STAT malloc_fails 0                  //

STAT bytes 72                        //所有被存储条目的字节数

STAT curr_items 1                    //当前缓存的条目数

STAT total_items 2                  //缓存条目的总数

STAT expired_unfetched 0            //item过期之前没有被touch过，也就是放进去之后就没更新过过期时间的数目

STAT evicted_unfetched 0            //item替换覆盖之前没有被touch过，也就是放进去之后就没更新过过期时间的数目

STAT evictions 0                    //为了给行的数据项目释放空间,而从缓存移除的缓存对象数目

STAT reclaimed 0                    //memcached 启动至今有多少次在存储数据的时候使用了过期数据的空间

STAT crawler_reclaimed 0            //被检索器回收的数目

STAT crawler_items_checked 0        //

STAT lrutail_reflocked 0            //

END

Memcached 的详细介绍：请点这里
Memcached 的下载地址：请点这里