nginx使用cronolog切割日志安装、部署、应用测试

mgjj

　　我们使用的是tnginx（支持日志抽样、直接输出到log服务器等）详细安装配置见另一篇博文，
　　http://michaelkang.blog.51cto.com/1553154/1359106
　　调用方式可以看一下的文章；
　　调用cronolog
　　http://tengine.taobao.org/document_cn/http_log_cn.html
　　#cronolog官网
　　http://cronolog.org/
　　软件下载链接（稳定版）
　　wget http://cronolog.org/download/cronolog-1.6.2.tar.gz
　　1，安装cronolog
　　tar zxvf cronolog-1.6.2.tar.gz
　　cd cronolog-1.6.2
　　mkdir -p /usr/local/cronolog
　　./configure --prefix=/usr/local/cronolog
　　make
　　make install
　　ln -s /usr/local/cronolog/sbin/cronolog /usr/bin/
　　2，创建一个命名管道
　　mkfifo /data/access_log_pipe
　　3，配置cronolog，按需配置：
　　精确到分钟
　　nohup cat /data/access_log_pipe | /usr/local/cronolog/sbin/cronolog /data/logs/%Y%m%d/access_%Y%m%d%H%M.log &
　　精确到小时
　　nohup cat /data/access_log_pipe | /usr/local/cronolog/sbin/cronolog /data/logs/%Y%m%d/access_%Y%m%d%H.log &
　　注意： cronolog必须在nginx启动前启动。如果nginx先启动了，可以reload实现。
　　4：相关应用方式测试；
　　#####################################################################
　　4.1日志直接写入文:100/1抽样测试
　　测试脚本：
　　for i in $(seq 1000);do echo --$i---;curl http://192.168.2.151/lua;done
　　nginx配置：
　　server {
　　listen       80;
　　server_name  localhost;
　　access_log  /data/logs/access_2014021203.log  main  ratio=0.01;
　　结果统计：
　　[root@computer logs]# wc -l access_2014021203.log  #按照分钟切割日志
　　10 access_2014021203.log
　　####################################################################
　　4.2 日志写入 管道文件 抽样测试
　　测试脚本：
　　for i in $(seq 1000);do echo --$i---;curl http://192.168.2.151/lua;done
　　nginx配置：
　　server {
　　listen       80;
　　server_name  localhost;
　　access_log  /data/access_log_pipe  main  ratio=0.01;
　　[root@computer 20140212]# wc -l access_2014021203.log
　　10 access_2014021203.log
　　4.3 测试结论；
　　nginx结合cronolog能够按照需求灵活的切割日志，nginx之前简单总结啦一下有三种日志切割方式，详见：
　　http://michaelkang.blog.51cto.com/1553154/1359062
　　cronolog对日志切割算比较灵活的，就是管道文件不是以服务的方式启动的，放置在后台比较担心稳定性。
　　下面是整理的将cronolog启动文件添加到nginx启动文件内容：
　　5.将cronolog启动文件嵌入nginx启动文件，保证在nginx启动之前启动管道文件。
　　###########nginx启动配置文件内置cronolog启动
　　[root@computer ~]# more /etc/init.d/nginx.cronolog
　　#!/bin/sh
　　#
　　# Comments to support chkconfig
　　#
　　# chkconfig: 2345 77 77
　　# Description: Startup script for nginx webserver
　　#
　　PATH=/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin
　　DESC="nginx daemon"
　　NAME=nginx
　　DAEMON=/usr/local/nginx/sbin/$NAME
　　CONFIGFILE=/usr/local/nginx/conf/$NAME.conf
　　PIDFILE=/usr/local/nginx/logs/$NAME.pid
　　SCRIPTNAME=/etc/init.d/$NAME
　　#日志存放位置
　　if [ ! -d "/data/logs" ]; then
　　mkdir -p "/data/logs"
　　fi
　　#生成管道文件位置
　　if [ ! -d "/usr/local/nginx/pipe/" ]; then
　　mkdir -p "/usr/local/nginx/pipe/"
　　fi
　　#cronolog相关变量
　　LOGPATH=/data/logs
　　PIPEPATH=/usr/local/nginx/pipe/
　　ERROE_LOG_PIPE=/usr/local/nginx/pipe/error_log_pipe
　　ACCESS_LOG_PIPE=/usr/local/nginx/pipe/access_log_pipe
　　CRONOLOG=/usr/local/cronolog/sbin/cronolog
　　d_mkfifo(){
　　#判断管道文件属性、建立管道文件
　　if [ ! -p "$ERROE_LOG_PIPE" ]; then
　　/bin/rm "$ERROE_LOG_PIPE"
　　mkfifo "$ERROE_LOG_PIPE"
　　fi
　　if [ ! -p "$ACCESS_LOG_PIPE" ]; then
　　/bin/rm "$ACCESS_LOG_PIPE"
　　mkfifo  "$ACCESS_LOG_PIPE"
　　fi
　　}
　　cronolog_start()
　　{
　　#ps -ef|grep wireless|grep -v grep |awk '{print $2}'|xargs kill -9
　　nohup cat "$ACCESS_LOG_PIPE" | $CRONOLOG  $LOGPATH/%Y%m%d/Access_%Y%m%d%H.log &
　　nohup cat "$ERROE_LOG_PIPE" |  $CRONOLOG  $LOGPATH/%Y%m%d/Error_%Y%m%d%H.log &
　　}
　　cronolog_kill()
　　{
　　ps -ef|grep data/logs|grep -v grep |awk '{print $2}'|xargs kill -9
　　ps -ef|grep nginx/pipe|grep -v grep |awk '{print $2}'|xargs kill -9
　　}
　　# Gracefully exit if the package has been removed.
　　test -x $DAEMON || exit 0
　　d_start() {
　　d_mkfifo
　　cronolog_start
　　$DAEMON -c $CONFIGFILE || echo -n " already running"
　　}
　　d_stop() {
　　#  kill -QUIT `cat $PIDFILE` || echo -n " not running"
　　cronolog_kill
　　killall nginx || echo -n " not running"
　　}
　　d_reload() {

　　kill -HUP `cat $PIDFILE` || echo -n " can't>　　}
　　case "$1" in
　　start)
　　echo -n "Starting $DESC: $NAME"
　　d_start
　　echo "."
　　;;
　　stop)
　　echo -n "Stopping $DESC: $NAME"
　　d_stop
　　echo "."
　　;;
　　reload)
　　echo -n "Reloading $DESC configuration..."
　　d_reload
　　echo "reloaded."
　　;;
　　status)
　　pgrep -x $NAME > /dev/null && echo $NAME \(pid `pgrep $NAME`\) is running...  || echo "$NAME is stoped."
　　;;
　　test|-t)
　　$DAEMON -t
　　;;
　　restart)
　　echo -n "Restarting $DESC: $NAME"
　　d_stop
　　sleep 2
　　d_start
　　echo "...done!"
　　;;
　　*)
　　echo "Usage: $SERVICENAME {start|stop|restart|reload|status|check}"
　　exit 3
　　;;
　　esac
　　exit 0