设为首页 收藏本站
查看: 908|回复: 0

[经验分享] Log日志分析

[复制链接]

尚未签到

发表于 2019-1-30 06:16:28 | 显示全部楼层 |阅读模式
1:获得awstats工具
   1):可以从http://awstats.sourceforge.net/网站下载。##awstats的官网
   2):在服务器上直接下载的方法
   [root@nagios ~]# wget http://sourceforge.net/projects/awstats/files/AWStats/7.0/awstats-7.0.tar.gz/download
#########################################################################
2:awstats的安装
[root@nagios ~]# tar zxvf awstats-7.0.tar.gz

[root@nagios ~]# mv awstats-7.0/ /usr/local/awstats


[root@nagios ~]# cd /usr/local/awstats/tools/


运行配置脚本生成awstats的配置文件
[root@nagios tools]# perl awstats_configure.pl

----- AWStats awstats_configure 1.0 (build 1.9) (c) Laurent Destailleur -----
This tool will help you to configure AWStats to analyze statistics for
one web server. You can try to use it to let it do all that is possible
in AWStats setup, however following the step by step manual setup
documentation (docs/index.html) is often a better idea. Above all if:
- You are not an administrator user,
- You want to analyze downloaded log files without web server,
- You want to analyze mail or ftp log files instead of web log files,
- You need to analyze load balanced servers log files,
- You want to 'understand' all possible ways to use AWStats...
Read the AWStats documentation (docs/index.html).

-----> Running OS detected: Linux, BSD or Unix

-----> Check for web server install
  Found Web server Apache config file '/usr/local/apache2/conf/httpd.conf'

-----> Check and complete web server config file '/usr/local/apache2/conf/httpd.conf'
Warning: You Apache config file contains directives to write 'common' log files
This means that some features can't work (os, browsers and keywords detection).
Do you want me to setup Apache to write 'combined' log files [y/N] ? y
  Add 'Alias /awstatsclasses "/usr/local/awstats/wwwroot/classes/"'
  Add 'Alias /awstatscss "/usr/local/awstats/wwwroot/css/"'
  Add 'Alias /awstatsicons "/usr/local/awstats/wwwroot/icon/"'
  Add 'ScriptAlias /awstats/ "/usr/local/awstats/wwwroot/cgi-bin/"'
  Add '' directive
  AWStats directives added to Apache config file.

-----> Update model config file '/usr/local/awstats/wwwroot/cgi-bin/awstats.model.conf'
  File awstats.model.conf updated.

-----> Need to create a new config file ?
Do you want me to build a new AWStats config/profile
file (required if first install) [y/N] ? y

-----> Define config file name to create
What is the name of your web site or profile analysis ?
Example: www.mysite.com
Example: demo
Your web site, virtual server or profile name:
> www.51auto.com

-----> Define config file path
In which directory do you plan to store your config file(s) ?
Default: /etc/awstats
Directory path to store config file(s) (Enter for default):
>

-----> Create config file '/etc/awstats/awstats.www.51auto.com.conf'
Config file /etc/awstats/awstats.www.51auto.com.conf created.

-----> Restart Web server with '/sbin/service httpd restart'
Stopping httpd: [  OK  ]
Starting httpd: [  OK  ]

-----> Add update process inside a scheduler
Sorry, configure.pl does not support automatic add to cron yet.
You can do it manually by adding the following command to your cron:
/usr/local/awstats/wwwroot/cgi-bin/awstats.pl -update -config=www.51auto.com
Or if you have several config files and prefer having only one command:
/usr/local/awstats/tools/awstats_updateall.pl now
Press ENTER to continue...


A SIMPLE config file has been created: /etc/awstats/awstats.www.51auto.com.conf
You should have a look inside to check and change manually main parameters.
You can then manually update your statistics for 'www.51auto.com' with command:
> perl awstats.pl -update -config=www.51auto.com
You can also read your statistics for 'www.51auto.com' with URL:
> http://localhost/awstats/awstats.pl?config=www.51auto.com

Press ENTER to finish...

################################################################
3:配置/etc/awstats/awstats.www.51auto.com.conf
  1):设置web server 的日志文件的位置 LogFile,必选根据实际分析的日志位置来设置。LogFile="/tmp/333.log" 这个就是你想分析的日志位置,可能在此服务器上分析其它服务器的日志呢。

  2):设置LogType 位分析的服务器日志类型;w表示web日志
  3):设置日志格式LogFormat;1表示采用NCSA apache combined/ELF/XLF log format

    4):设置所需要分析的网站域名 SiteDomain
    5):设置awstats的数据库存放的目录 DirData=“/usr/local/awstats/data”
文件中基本信息已配置好了,只要更改LogFile和DirData就Ok了。


[root@nagios ~]# mkdir /usr/local/awstats/data
[root@nagios ~]# chmod -R 755 /usr/local/awstats/data/
[root@nagios ~]# chmod 755 /usr/local/awstats/wwwroot/cgi-bin/*.pl
1:一定要进行相关文件(夹)的授权,否则访问页面权限会不够。
2 注:rpm安装包里面的*.pl都具有执行权限,tar包里面的*.pl却没有。
4:修改httpd.conf文件
[root@nagios tools]# less httpd_conf
#
# Content of this file, with correct values, can be automatically added to
# your Apache server by using the AWStats configure.pl tool.
#


# If using Windows and Perl ActiveStat, this is to enable Perl script as CGI.
#ScriptInterpreterSource registry


#
# Directives to add to your Apache conf file to allow use of AWStats as a CGI.
# Note that path "/usr/local/awstats/" must reflect your AWStats install path.
#
Alias /awstatsclasses "/usr/local/awstats/wwwroot/classes/"
Alias /awstatscss "/usr/local/awstats/wwwroot/css/"
Alias /awstatsicons "/usr/local/awstats/wwwroot/icon/"
ScriptAlias /awstats/ "/usr/local/awstats/wwwroot/cgi-bin/"


#
# This is to permit URL access to scripts/files in AWStats directory.
#

    Options None
    AllowOverride None
    Order allow,deny
    Allow from all

###将此文件的内容加入到/usr/local/apache2/conf/httpd.conf文件中
###如果在配置生成awstats.www.51auto.com.conf文件时,选择apache默认配置文件就是/usr/local/apache2/conf/httpd.conf,那么就不用加软件自身就加进去了。


5:生成数据

[root@nagios tools]# /usr/local/awstats/wwwroot/cgi-bin/awstats.pl -update -config=www.51auto.com

##因为程序是通过分析日志来进行流量统计的,如果你的日志很大的话会很耗系统资源的。

6:在浏览器中输入:http://172.31.2.250:8980/awstats/awstats.pl?config=www.51auto.com
就可以很清晰的看到你想要的结果。









#################################################
###################################################
利用awstats来分析maillog

邮件日志分析:
[root@analyse ~]# cd/usr/local/awstats/tools/
[root@analyse tools]# perlmaillogconvert.pl standard maillog >>/tmp/maillogexplain.log
#awk '{print $3}'/tmp/mailstreamline.log |grep  -E"51auto.com|51auto.cn|carking001.
Com|sort|uniq c
#awk '{if($1 >= 100) print $1 "  " $2}' /tmp/2car.log


列出目前在 Mail Queue 中的邮件

mailq

刪除所有在 Queue 中的邮件

postsuper -d ALL




OK Done!!!!




运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-669310-1-1.html 上篇帖子: Awstats+GeoIP 下篇帖子: AWStats 日志分析
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表