Python自动化运维

q66262

psutil库
　　获取系统运行的进程和系统利用率

　　[root@serverc ~]# yum -y install python2
　　[root@serverc ~]# yum -y install python2-psutil
　　[root@serverc ~]# python

　　1.cpu信息

• user 执行用户进程的时间百分比
  
• system 执行内核进程和中断的时间百分比
  
• idle cpu处于idle状态的时间百分比
  
• 　　iowait 由于IO等待而使CPU处于idle(空闲)状态的时间百分比
  
  

  　　>> import psutil
  　　>> psutil.cpu_times() #使用cpu_times()方法获取cpu的完整信息
  　　>> psutil.cpu_times(percpu=True) #显示所有逻辑cpu信息
  　　>> psutil.cpu_times().user  #用户user的cpu时间比
  　　>> psutil.cpu_count()       #获取cpu的逻辑个数，默认logical=True4
  　　>> psutil.cpu_count(logical=False)  #获取cpu的物理个数
  
  

  
  

　　2.获取内存信息
　　total(内存总数)、used(已使用的内存数)、free(空闲内存数)、buffers(缓冲使用数)、cache(缓存使用数)、swap(交换分区使用数)
　　

>>> mem = psutil.virtual_memory()　　
>>> mem
　　
>>> mem.total
　　
>>> mem.free
　　
>>> mem.used
　　
>>> psutil.swap_memory()
　　

　　3.磁盘信息
　　read_count(读IO数)、write_count(写IO数)、read_bytes(IO读字节数)、write_bytes(IO写字节数)、read_time(磁盘读时间)、write_time(磁盘写时间)
　　

>>> psutil.disk_partitions() #获取完整信息　　
>>> psutil.disk_usage('/')   #获取分区的使用情况
　　
>>> psutil.disk_io_counters()  #获取硬盘总的IO个数、读写信息
　　
>>> psutil.disk_io_counters(perdisk=True) #获取单个分区IO个数、读写信息
　　

　　4.网络信息
　　bytes_sent(发送字节数)、 bytes_recv(接收字节数), packets_sent(发送数据包数), packets_recv(接收数据包数)
　　

>>> psutil.net_io_counters() #获取网络总的IO信息，默认pernic=False　　
>>> psutil.net_io_counters(pernic=True) #pernic=True 输出每个网络借口的IO信息
　　

　　5.其他系统信息
　　psutil模块支持获取用户登录、开机时间等信息
　　

>>> psutil.users() #返回当前登录系统的用户信息　　
>>> import psutil,datetime
　　
>>> psutil.boot_time() #获取开机时间，以linux时间戳格式返回
　　
>>> datetime.datetime.fromtimestamp(psutil.boot_time()).strftime("%Y-%m-%d %H:%M:%S") #转换成自然时间格式
　　

系统进程管理方法
　　

>>> import psutil　　
>>> psutil.pids()  #列出所有进程PID
　　
>>> p = psutil.Process(1555)  #实例化一个Process对象，参数为一进程PID
　　
>>> p.name()  #进程名
　　
'sshd'
　　
>>> p.exe()  #进程bin路径
　　
'/usr/sbin/sshd'
　　
>>> p.cwd()  #进程工作目录绝对路径
　　
>>> p.status()  #进程状态
　　
'sleeping'
　　
>>> p.create_time()  #进程创建时间，时间戳格式
　　
>>> p.uids()  #进程uid信息
　　
>>> p.gids()  #进程gid信息
　　
>>> p.cpu_times()  #进程CPU时间信息，包括user、system的cpu时间
　　
>>> p.cpu_affinity()  #get进程CPU素和度，如果设置进程CPU素和度，将CPU号作为参数即可
　　
>>> p.memory_info()  #进程内存rss、vms信息
　　
>>> p.memory_percent()  #进程内存利用率
　　
>>> p.connections()  #返回打开进程socket的namedutples列表、包括fd、family、laddr等信息
　　
>>> p.num_threads()  #进程开启的线程数
　　

popen类的使用
　　

>>> import psutil　　
>>> from subprocess import PIPE  #通过psutil的Popen方法启动的应用程序，可以跟踪该程序运行的所有相关信息
　　
>>> p = psutil.Popen(["/usr/bin/python","-c","print('hello')"],stdout=PIPE)
　　
>>> p.name()
　　
'python'
　　
>>> p.username()
　　
'root'
　　
>>> p.communicate()
　　
('hello\n', None)
　　
>>> p.cpu_times()  #得到进程运行的CPU时间
　　

IP地址处理模块IPy

　　[root@serverc ~]# yum -y install python-IPy

　　1.IP地址、网段的基本处理
　　

>>> from IPy import IP　　
>>> IP('10.0.0.0/8').version() #区分IPv4与IPv6
　　
>>> IP('::1').version()
　　
>>> ip = IP('192.168.0.0/16')
　　
>>> print ip.len() #输出IP/16网段的IP个数
　　
>>> for x in ip:   #输出IP清单
　　
>>>     print(x)
　　

　　2.反向解析名称、IP类型、IP转换
　　

>>> from IPy import IP　　
>>> ip = IP('192.168.1.101')
　　
>>> ip.reverseName()  #反向解析地址格式
　　
>>> ip.iptype()  #为私网类型'PRIVATE'
　　
>>> IP('8.8.8.8').iptype()  #为公网类型 'PUBLIC'
　　
>>> IP('8.8.8.8').int() #转换成整型格式
　　
>>> IP('8.8.8.8').strHex() #转换成十六进制格式
　　
>>> IP('8.8.8.8').strBin()  #转换成二进制格式
　　
>>> print(IP(0x8080808))  #十六进制转成IP格式
　　

　　3.IP与掩码产生网段格式
　　

>>> print(IP('192.168.1.0').make_net('255.255.255.0'))　　
>>> print (IP('192.168.1.0/255.255.255.0',make_net=True))
　　
>>> print (IP('192.168.1.0-192.168.1.255',make_net=True))
　　

　　结果都是：192.168.1.0/24
　　4.也可以通过strNormal方法指定不同wantprefixlen参数值以定制不同输出类型的网段。
　　wantprefixlen的取值及含义：

• wantprefixlen = 0  无返回值
  
• wantprefixlen = 1  prefix格式
  
• wantprefixlen = 2  decimalnetmask格式
  
• wantprefixlen = 3  lastIP格式
  

　　操作如下：
　　

>>> IP('192.168.1.0/24').strNormal(0)　　'192.168.1.0'
　　
>>> IP('192.168.1.0/24').strNormal(1)
　　'192.168.1.0/24'
　　
>>> IP('192.168.1.0/24').strNormal(2)
　　'192.168.1.0/255.255.255.0'
　　
>>> IP('192.168.1.0/24').strNormal(3)
　　'192.168.1.0-192.168.1.255'
　　

　　5.判断IP地址和网段是否包含于于另一个网段中
　　

>>> '192.168.1.100' in IP('192.168.1.0/24')　　
>>> IP('192.168.1.0/24') in IP('192.168.0.0/16')
　　

　　判断两个网段是否存在重叠，采用IPy提供的overlaps方法
　　

>>> IP('192.168.0.0/23').overlaps('192.168.1.0/24') #返回1代表存在重叠　　
>>> IP('192.168.0.0/24').overlaps('192.168.2.0') #返回0代表不存在重叠
　　

　　示例 根据输入的IP或子网返回网络、掩码、广播、反向解析、子网数、IP类型等
　　

#!/usr/bin/env python　　
from IPy import IP
　　

　　
ip_s = raw_input('Please input an IP or net-range: ') #输入IP地址或网段地址
　　
ips = IP(ip_s)
　　
if len(ips) > 1: #为一个网络地址
　　print ('net: %s' %ips.netmask()) #输出网络地址
　　print ('netmask: %s' %ips.netmask()) #输出网络掩码地址
　　print ('broadcast: %s' %ips.broadcast()) #输出网络广播地址
　　print ('reverse address: %s' %ips.reverseNames()[0]) #输出地址反向解析
　　print ('subnet: %s' %len(ips))  #输出网络子网数
　　
else:
　　print ('reverse address: %s' %ips.reverseNames()[0]) #输出IP反向解析
　　

　　
print ('hexadecimal: %s' %ips.strHex()) #输出十六进制地址
　　
print ('binary ip: %s' %ips.strBin()) #输出二进制地址
　　
print ('iptype: %s' %ips.iptype()) #输出地址类型
　　

　　[root@serverc ~]# vi ip_mask.py

DNS处理模块dnspython
　　A记录：将主机名转换成IP地址
　　MX记录:邮件交换记录，定义邮件服务器的域名
　　CNAME记录：指别名记录，实现域名间的映射
　　NS记录：标记区域的域名服务器及授权子域
　　PTR记录：反向解析，于A记录相反，将IP转换成主机名
　　SOA记录：SOA标记，一个起始授权区的定义

　　[root@serverc ~]# wget http://www.dnspython.org/kits/1.9.4/dnspython-1.9.4.tar.gz
　　[root@serverc ~]# tar -zxvf dnspython-1.9.4.tar.gz
　　[root@serverc ~]# python setup.py install

　　实现A记录查询方法
　　

#! /usr/bin/env python　　
import dns.resolver
　　

　　
domain = raw_input('Please input an domain: ') #输入域名地址 如www.baidu.com
　　
A = dns.resolver.query(domain,'A') #指定查询类型为A记录
　　
for i in A.response.answer:  #通过response.answer方法获取查询回应信息
　　for j in i.items:    #遍历回应信息
　　print j.address
　　

　　[root@serverc ~]# python dns_simple.py
　　Please input an domain: www.baidu.com

　　实现MX记录查询方法
　　

#! /usr/bin/env python　　
import dns.resolver
　　

　　
domain = raw_input('Please input an domain: ') #如 163.com
　　
MX = dns.resolver.query(domain,'MX')
　　
for i in MX:
　　print 'MX preference = ', i.preference,'mail exchanger = ',i.exchange
　　

　　实现NS记录查询方法
　　

#!/usr/bin/env python　　
import dns.resolver
　　

　　
domain = raw_input('Please input an domain: ') #输入一级域名  如baidu.com
　　
ns = dns.resolver.query(domain, 'NS')
　　
for i in ns.response.answer:
　　for j in i.items:
　　print j.to_text()
　　

　　实现CNAME记录查询方法
　　

#!/usr/bin/env python　　
import dns.resolver
　　

　　
domain = raw_input('Please input an domain: ')
　　
cname = dns.resolver.query(domain, 'CNAME') #指定查询类型为CNAME记录
　　
for i in cname.response.answer: #结果将回应cname后的目标域名
　　for j in i.items:
　　print j.to_text()
　　

　　监控所有服务的IP是否正常
　　

#!/usr/bin/python　　
import dns.resolver
　　
import os
　　
import httplib
　　

　　
iplist=[]  #定义域名IP列表变量
　　
appdomain="www.taobao.com"  #定义业务域名
　　

　　
def get_iplist(domain=""): #域名解析函数，解析成功IP将被追加到iplist
　　try:
　　A = dns.resolver.query(domain,'A') #解析A记录类型
　　except Exception,e:
　　print "dns resolver error:"+ str(e)
　　return
　　for i in A.response.answer:
　　for j in i.items:
　　iplist.append(j.address) #追加到iplist
　　return True
　　

　　
def checkip(ip):
　　checkurl=ip+":80"
　　getcontent=""
　　httplib.socket.setdefaulttimeout(5) #定义http连接超时时间(5秒)
　　conn=httplib.HTTPConnection(checkurl) #创建http连接对象
　　

　　try:
　　conn.request("GET","/",headers = {"Host": appdomain}) #发起URL请求，添加host主机头
　　r=conn.getresponse()
　　getcontent = r.read(15) #获取URL页面前15个字符，以便做可用性校验
　　finally:
　　if getcontent == "<!doctype html>": #监控URL页的内容一般是事先定义好的，比如"HTTP200"等
　　print ip+" [OK]"
　　else:
　　print ip+" [Error]"
　　

　　
if __name__=="__main__":
　　if get_iplist(appdomain) and len(iplist)>0:
　　for ip in iplist:
　　checkip(ip)
　　else:
　　print "DNS resolver error."