设为首页 收藏本站
查看: 2758|回复: 6

[经验分享] awstats日志分析部署

[复制链接]

尚未签到

发表于 2012-7-9 22:42:12 | 显示全部楼层 |阅读模式
一、安装前介绍

AWStats是在Sourceforge上发展很快的一个基于Perl的WEB日志分析工具。本文档是分析apache日志。

l apache需求:
并且apache的access.log格式必须是combined的格式。
前提安装apache,并且支持cgi模块。

l 软件及放置路径
awstats-7.0.tar.gz
/usr/local/src/
   
手动创建目录介绍
/usr/local/awstats -------awstats安装路径
/var/lib/awstats    ------记录更新路径
/etc/awstats      ------- 配置文件路径




二、安装awstats
2.1、准备安装环境
mkdir /usr/local/awstats     \\awstats 安装目录是 /usr/local/awstats

cd   /usr/local/src
tar  xzvf  awstats-7.0.tar.gz
cd awstats-7.0/
cp  -r  *  /usr/local/awstats/

2.2、perl脚本安装过程

cd   /usr/local/awstats/tools

root@test04:/usr/local/awstats/tools# ./awstats_configure.pl

----- AWStats awstats_configure 1.0 (build 1.9) (c) Laurent Destailleur -----
This tool will help you to configure AWStats to analyze statistics for
one web server. You can try to use it to let it do all that is possible
in AWStats setup, however following the step by step manual setup
documentation (docs/index.html) is often a better idea. Above all if:
- You are not an administrator user,
- You want to analyze downloaded log files without web server,
- You want to analyze mail or ftp log files instead of web log files,
- You need to analyze load balanced servers log files,
- You want to 'understand' all possible ways to use AWStats...
Read the AWStats documentation (docs/index.html).

-----> Running OS detected: Linux, BSD or Unix

-----> Check for web server install
Found Web server Apache config file '/usr/local/apache2/conf/httpd.conf'

-----> Check and complete web server config file '/usr/local/apache2/conf/httpd.conf'
Warning: You Apache config file contains directives to write 'common' log files
This means that some features can't work (os, browsers and keywords detection).

(1) awstats依靠apache来产生页面,询问此apache的日志是否更换为combined格式。
  根据个人需要是否改变。会在httpd.conf加入下面内容。
Do you want me to setup Apache to write 'combined' log files [y/N] ? n
Add 'Alias /awstatsclasses "/usr/local/awstats/wwwroot/classes/"'
Add 'Alias /awstatscss "/usr/local/awstats/wwwroot/css/"'
Add 'Alias /awstatsicons "/usr/local/awstats/wwwroot/icon/"'
Add 'ScriptAlias /awstats/ "/usr/local/awstats/wwwroot/cgi-bin/"'
Add '<Directory>' directive
AWStats directives added to Apache config file.

-----> Update model config file '/usr/local/awstats/wwwroot/cgi-bin/awstats.model.conf'
File awstats.model.conf updated.

(2) 生成配置文件
-----> Need to create a new config file ?
Do you want me to build a new AWStats config/profile
file (required if first install) [y/N] ? y

-----> Define config file name to create
What is the name of your web site or profile analysis ?
Example: www.mysite.com
Example: demo
配置文件名称
Your web site, virtual server or profile name:
> ch.com
配置文件路径设置
-----> Define config file path
In which directory do you plan to store your config file(s) ?
Default: /etc/awstats
Directory path to store config file(s) (Enter for default):
>
生成配置文件名称及路径
-----> Create config file '/etc/awstats/awstats.ch.com.conf'
Config file /etc/awstats/awstats.ch.com.conf created.

-----> Restart Web server with '/etc/init.d/apache restart'

(3) 默认回车,结束
-----> Add update process inside a scheduler
Sorry, configure.pl does not support automatic add to cron yet.
You can do it manually by adding the following command to your cron:
/usr/local/awstats/wwwroot/cgi-bin/awstats.pl -update -config=ch.com
Or if you have several config files and prefer having only one command:
/usr/local/awstats/tools/awstats_updateall.pl now
Press ENTER to continue...

(4) 生成介绍
A SIMPLE config file has been created: /etc/awstats/awstats.ch.com.conf
You should have a look inside to check and change manually main parameters.
You can then manually update your statistics for 'ch.com' with command:
> perl awstats.pl -update -config=ch.com
You can also read your statistics for 'ch.com' with URL:
> http://localhost/awstats/awstats.pl?config=ch.com

Press ENTER to finish...

2.3、更新被分析日志

修改/etc/awstats/ awstats.ch.com.conf
Logfile=”xxxxxxxxxxxxxxxxxxx”
其它默认
重启apache

\\日志是可以使用匹配的,然后使用cron定时任务更新awstats.pl

如果更改日志后使用下面命令更新分析报告
cd /usr/local/awstats/wwwroot/cgi-bin
./awstats.pl  config=ch.com  update

浏览器浏览地址 就能查看





三、显示地址插件

3.1、GEOIP地址库的安装

GeoIP和Geo:IPfree都是免费的,是国家/IP的影射表,通过DNS反相解析域名得到的统计准确,速度非常快。GeoIP的API和默认的库是免费的,但数据更新服务收费。Geo::IPfree代码是公开的,数据库也是公开的,因此可以自己建立自己的数据库。
  说明:文档中GEOIP和GEO::IPfree都安装上,只是未使用GEO::IPfree

  下载链接:
http://geolite.maxmind.com/download/geoip/api/c/GeoIP-1.4.7.tar.gz

http://geolite.maxmind.com/download/geoip/api/perl/Geo-IP-1.39.tar.gz


3.1.1、软件的安装

GeoIP是c库的,Geo-IP是perl库的,必须先编译安装c库的,再安装perl库的。

C库安装

tar xzvf GeoIP-1.4.7.tar.gz
cd GeoIP-1.4.7
./configure
make
make install

PERL库安装

tar  xzvf Geo-IP-1.39.tar.gz
cd Geo-IP-1.39
perl Makefile.PL
make
make install

Geo::IPfree安装
http://mirrors.sohu.com/CPAN/authors/id/B/BR/BRICAS/Geo-IPfree-1.110450.tar.gz

tar xzvf Geo-IPfree-1.110450.tar.gz
cd Geo-IPfree-1.110450
perl Makefile.PL
make
make install

3.1.2、更新数据包

下载地址:
http://geolite.maxmind.com/download/geoip/database/GeoLiteCity.dat.gz

http://geolite.maxmind.com/download/geoip/database/GeoLiteCountry/GeoIP.dat.gz

cd /etc/awstats
gzip -d GeoIP.dat.gz
gzip -d GeoLiteCity.dat.gz

修改 /etc/awstats/awstats.ch.com.conf

1423 LoadPlugin="geoip GEOIP_STANDARD /etc/awstats/GeoIP.dat"
1433 LoadPlugin="geoip_city_maxmind GEOIP_STANDARD /etc/awstats/GeoLiteCity.dat"

重新刷新浏览器,即可看到IP--国家---城市的对应。

3.2、QQ数据库的添加

   awstats IP数据库好多文章使用的都是GEOIP,这个是免费的,国外的,但是对部分IP地址的映射不是很准确,现在使用QQ数据库,对中国用户是相对精准的。
    QQ数据库添加参照linuxtone网站中的文档进行配置。



3.2.1、QQ库介绍

qq数据库插件qqhostinfo。

qqhostinfo包含文件:qqhostinfo.pm、qqwry.dat、qqwry.pl。

将下载的qqhostinfo内的3个文件拷贝到/usr/local/awstats/wwwroot/cgi-bin/plugins

3.2.2、QQ库的配置

1.         修改qqhostinfo.pm
push @INC, "${DIR}/plugins";
require "${DIR}/plugins/qqwry.pl";
改成
push @INC, "/usr/local/awstats/wwwroot/cgi-bin/plugins";
require "/usr/local/awstats/wwwroot/cgi-bin/plugins/qqwry.pl";

2.         修改qqwry.pl

my $ipfile="./QQWry.Dat";
改成
my $ipfile="/usr/local/awstats/wwwroot/cgi-bin/plugins/qqwry.dat";

3.         添加配置文件信息
/etc/awstats/awstats.ch.com.conf 中添加
LoadPlugin="qqhostinfo"

4.         更改权限
chmod -R 777 /usr/local/awstats/wwwroot/cgi-bin/plugins/

刷新浏览器即可看到中文显示的IP定位。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-502-1-1.html 上篇帖子: 网站日志分析平台nginx+awstats+crontab 下篇帖子: squid日志分析软件sarg的安装和使用

尚未签到

发表于 2013-3-13 20:12:12 | 显示全部楼层
学习了,谢谢分享、、、

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

尚未签到

发表于 2013-5-15 22:52:50 | 显示全部楼层
为中华而努力读书!一包中华好多钱啊~~~

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

发表于 2013-5-16 06:49:19 | 显示全部楼层
脱了衣服我是禽兽,穿上衣服我是衣冠禽兽!

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

尚未签到

发表于 2013-5-16 20:36:45 | 显示全部楼层
看帖回帖是美德!:lol

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

尚未签到

发表于 2013-5-17 11:55:11 | 显示全部楼层
月经不仅仅是女人的痛苦,也是男人的痛苦。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

尚未签到

发表于 2013-5-17 23:45:16 | 显示全部楼层
走,MM,咱们化蝶去……

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表