监视与记录本地服务器进程/端口占用带宽流量

2饿1二

由于公司的问题排查需求，需要将公网服务器上占用带宽流量较高的进程或者端口进行记录和保存，以便以后查询问题时可以进行核实。
这个问题纠结了1、2天，使用python应该是可以满足需求，奈何本菜鸟的python实在是拿不出手，所以只能依靠Linux成品的小工具与Shell来实现了。
Linux上的iftop与nethogs两个工具比较符合要求，但是这两个工具都无法完美的将内容记录下来，如果使用重定向的方式记录内容，那么记录下来的东西并不是文本格式，使用cat查看是没问题的，但是想要进行编辑或者过滤，就不可行了，有兴趣的可以自己试试看。
后来同事发现了iftop的新版本，iftop-1.0pre3（http://freecode.com/projects/iftop），可能需要翻墙才可以访问，并且安装iftop-1.0pre3需要安装一些依赖，yum与apt-get都没有办法获取到，只能自己去搜索编译了，依赖的安装太过繁杂，各位自行搜索查找吧。

安装好iftop-1.0pre3之后，使用-t参数即可将内容打印到屏幕，此时重定向就可以正常的输出内容。

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79

#!/bin/bash line() {     cols=`tput cols`     for k in `seq 1 ${cols}`         do             echo -n "-"         done } my_set() {     USER=`whoami`     GROUP=`groups`     timestamp=`date +%F_%T`     days="/tmp/net_status/`date +%F`"     file_path="/tmp/net_status/netinfo.log.log"     tmp_file_path="/tmp/net_status/tmp_netinfo.log"     # file_path="/tmp/netinfo.log"     net_status_file="${days}/`date +%H`.log"     total_rate=`cat ${tmp_file_path} | grep "Total send and receive rate:" | awk '{print $7}'` } tidy() {     sudo /usr/local/sbin/iftop -L 20 -s 10 -o 10s -N -P -n -t > ${tmp_file_path}     line_num=`cat ${tmp_file_path}|wc -l`     line_head=`echo $((${line_num}-9))`     line_tail=`echo $((${line_head}-3))`     sudo cat ${tmp_file_path} | head -${line_head} | tail -${line_tail} > ${file_path}     # sed -n '4,43p' ${tmp_file_path} > ${file_path} } check() {     if [ ! -d ${days} ];then         sudo mkdir $days         sudo chown -R ${USER}.${GROUP} ${days}     fi } output() {     m=-1     n=0     echo ""  >> ${net_status_file}     echo ${timestamp} >> ${net_status_file}     echo "Total send and receive rate: ${total_rate}" >> ${net_status_file}     line >> ${net_status_file}     echo "" >> ${net_status_file}     echo "Number\tSource Addr&Port \t   \t Destination Addr&Port\t\tSend\t\tReceive" >> ${net_status_file}     echo "" >> ${net_status_file}     for i in `seq 1 20`     do         m=$(($m+2))         n=$(($n+2))         net_sou=`cat ${file_path} | sed -n "${m},${n}p" | awk 'NR==1{print $2}'`         net_des=`cat ${file_path} | sed -n "${m},${n}p" | awk 'NR==2{print $1}'`         rate_sou=`cat ${file_path} | sed -n "${m},${n}p" | awk 'NR==1{print $6}'`         rate_des=`cat ${file_path} | sed -n "${m},${n}p" | awk 'NR==2{print $5}'`         echo "No $i\t${net_sou} \t - \t ${net_des}\t\t$rate_sou\t\t$rate_des " >> ${net_status_file}     done     line >> ${net_status_file}     echo "" >> ${net_status_file}     echo "" >> ${net_status_file}     echo "" >> ${net_status_file}     echo "" >> ${net_status_file} } main() {     my_set     tidy     check     output } main

领导着急要脚本，所以没有进行内容的优化，也没有使用SQL进行内容存储，以后有时间可以再进行优化或者改进，使其更方便查询检索，这里算是做个记录了。

iftop命令的-L参数是显示top多少，我用的20，这个可以改成传参，有兴趣的自己搞。

效果图：