设为首页 收藏本站
查看: 971|回复: 0

[经验分享] awstats+jawstats自动分析日志2

[复制链接]

尚未签到

发表于 2019-1-30 07:43:58 | 显示全部楼层 |阅读模式
  我的环境是:

1、有多个反向代理(VPS)在异地

2、每台反向代理承担多个域名

3、每个域名不一定都有用户访问



要求:实现日志自动分析.



需要注意的是关于每个域名的awstats分析结果的保存位置规划。本人脚本一般,大神略过。呵呵



我的作法:

反向代理:每天定时压缩日志到一个固定的目录, 判断文件如果大于8M,那么认为它是有写日志的,然后开始压缩。

http://myhat.blog.运维网.com/391263/980220  有个多域名,每个域名每天都做日志轮换。



做个计划任务,每天自动压缩日志


  • #!/bin/bash -x
  • #used for zip nginx log
  • logs_path="/usr/local/nginx/logs"
  • temp_path="/nginx_log_temp"
  • YESTERDAY=`date +%Y%m%d -d "yesterday" `

  • test -e $temp_path || mkdir $temp_path  

  • rm -rf $temp_path/*

  • cd ${logs_path}/$(date -d "yesterday" +"%Y")/$(date -d "yesterday" +"%m")/

  • for i in domain1 domain2 domain3  
  • do
  •     if [ `du  $i.log.$YESTERDAY|awk '{if($1>8208){print $NF}}'` ];then
  •         tar -czf $i.log.$YESTERDAY.tar.gz $i.log.$YESTERDAY
  •         mv  $i.log.$YESTERDAY.tar.gz $temp_path
  •     fi
  • done



日志分析服务器:(没有任何的端口隐射。)

a、每天定时sftp 下载昨天的日志,自动解压到固定的目录(不同的反向代理解析到不同的目录),前提是要做好SSH免密码登录. (略过)




  • #!/bin/bash -x
  • #used for donwload logfile
  • down_tmp="/tmp/down_tmp"
  • test -e $down_tmp || mkdir $down_tmp

  • for i in domain1 domain2 domain3
  • do
  •     test -e /tmp/$i || mkdir /tmp/$i
  • done

  • for i in a.a.a.a b.b.b.b c.c.c.c d.d.d.d
  • do
  •     cd  /tmp/down_tmp/$i
  •     test -e /tmp/unzip_tmp/$i || mkdir -p /tmp/unzip_tmp/$i
  •     sftp root@$i:/nginx_log_temp/  /dev/null
  • 30 9 * * *   /usr/local/awstats/tools/awstats_updateall.pl now > /dev/null





运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-669361-1-1.html 上篇帖子: awstats的安装配置过程详解 下篇帖子: 使用awstats分析网站日志
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表