查看: 991|回复: 0

[经验分享] python分析nginx日志

[复制链接]

9iiooi

累计签到：1 天
连续签到：1 天

发表于 2016-12-14 09:12:24 | 显示全部楼层 |阅读模式

问题：分析nginx日志并找出访问最多10个IP地址的来源以及次数
使用python模块IP
使用方法以及下载地址：https://pypi.python.org/pypi/17MonIP
相关python脚本：

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28

#!/usr/bin/env python
#coding:utf8
#Auth： lad
#date：2016-12-05
#desc：parser the nginx's log,the head of 10
import sys
reload(sys)
sys.setdefaultencoding( "utf-8" )

import IP
import os

cnt=10

fd = open("/tmp/IP.txt","w")
ipStr = os.popen("cat /tmp/access.log|awk '{print $6}'|sort | uniq -c | sort -nr | head -10 ")

fd.write(ipStr.read())
fd.close()

fd1 = open("/tmp/IP.txt","r")
fd2 = open("/tmp/nginx_IP.txt","w+")
for i in range(1,cnt+1):
d = fd1.readline()
print >> fd2,"访问次数：%8s 访问IP：%16s IP地址来源：%20s"%(d.split()[0],d.split()[1],IP.find(d.split()[1]))
fd1.close()
fd2.close()
print "OK"

具体使用awk分割的时候需要考虑自己日志的格式，根据格式切割。

python

相关帖子

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表，该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有，请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意，请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息，一经发现立即删除。若您因此触犯法律，一切后果自负，我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集，我们仅提供一个展示、介绍、观摩学习的平台，我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责，亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏，不得用于商业或者其他用途，否则，一切后果均由您自己承担，我们对此不承担任何法律责任
7、如涉及侵犯版权等问题，请您及时通知我们，我们将立即采取措施予以解决
8、联系人Email：admin@iyunv.com 网址：www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址：https://www.yunweiku.com/thread-314050-1-1.html 上篇帖子：基于python的scrapy爬虫抓取京东商品信息下篇帖子：用python+selenium抓取豆瓣电影中的正在热映前12部电影并按评... python

使用道具举报