19.1. 系统基础信息模块详解¶
19.1.1. 系统性能信息模块psutil¶
psutil是一个跨平台库(http://code.google.com/p/psutil/),能够轻松实现获取系统运行的进程和系统利用率(包括CPU、内存、磁盘、网络等)信息。它主要应用于系统监控,分析和限制系统资源及进程的管理。它实现了同等命令行工具提供的功能,如ps、top、lsof、netstat、ifconfig、who、df、kill、free、nice、ionice、iostat、iotop、uptime、pidof、tty、taskset、pmap等。
安装psutil模块
pip安装
pip install psutil
源码安装
#wget https://pypi.python.org/packages/source/p/psutil/psutil-2.0.0.tar.gz --no-check-certificate
# tar -xzvf psutil-2.0.0.tar.gz
# cd psutil-2.0.0
# python setup.py install
代码示例
#!/usr/bin/env python
# -*- coding:utf8 -*-
# @auther: 18793
# @Date: 2020/7/18 13:15
# @filename: 01_pustil.py
# @Email: 1879324764@qq.com
# @Software: PyCharm
import psutil
import datetime
# CPU信息
# 使用cpu_times方法获取CPU完整信息,需要显示所有逻辑CPU信息,
print("获取CPU完整信息:", psutil.cpu_times())
print("获取单项数据信息,如用户user的CPU时间比:", psutil.cpu_times().user)
print("获取CPU的逻辑个数,默认logical=True4:", psutil.cpu_count())
print("获取CPU的物理个数:", psutil.cpu_count(logical=False))
print("分割线".center(100, "-"))
# 内存信息
print("psutil.virtual_memory方法获取内存完整信息:", psutil.virtual_memory())
mem = psutil.virtual_memory()
print("获取内存总数:", mem.total)
print("获取空闲内存数:", mem.free)
print("获取SWAP分区信息sswap:", psutil.swap_memory())
print("分割线".center(100, "-"))
# 磁盘信息
print("使用psutil.disk_partitions方法获取磁盘完整信息:", psutil.disk_partitions())
print("使用psutil.disk_usage方法获取分区(参数)的使用情况:", psutil.disk_usage("/"))
print("使用psutil.disk_io_counters获取硬盘总的IO个数:", psutil.disk_io_counters())
print("perdisk=True”参数获取单个分区IO个数:", psutil.disk_io_counters(perdisk=True))
print("分割线".center(100, "-"))
# 网络信息
print("使用psutil.net_io_counters获取网络总的IO信息:", psutil.net_io_counters())
print("分割线".center(100, "-"))
# 其他系统信息
print("使用psutil.users方法返回当前登录系统的用户信息:", psutil.users())
print("使用psutil.boot_time方法获取开机时间,以Linux时间戳格式返回:", psutil.boot_time())
print("转换成自然时间格式:", datetime.datetime.fromtimestamp(psutil.boot_time()).strftime("%Y-%m-%d %H:%M:%S"))
# 进程信息
print("列出所有进程PID:", psutil.pids())
p = psutil.Process(408)
print("进程名", p.name())
print("进程bin路径", p.exe())
print("进程工作目录绝对路径", p.cwd())
print("进程状态:", p.status())
print("进程创建时间,时间戳格式:", p.create_time())
print("进程uid信息:", p.uids())
print("进程gid信息:", p.gids())
print("进程CPU时间信息,包括user、system两个CPU时间:", p.cpu_times())
print("get进程CPU亲和度,如要设置进程CPU亲和度:", p.cpu_affinity())
print("进程内存利用率:", p.memory_percent())
print("进程内存rss、vms信息:", p.memory_info())
print("进程IO信息,包括读写IO数及字节数:", p.io_counters())
print("返回打开进程socket的namedutples列表:", p.connections())
print("进程开启的线程数", p.num_threads())
from subprocess import PIPE
p = psutil.Popen(["/usr/bin/python", "-c", "print('hello')"], stdout=PIPE)
print(p.name())
print(p.username())
print(p.connections())
print(p.cpu_times())
19.1.2. 实用的IP地址处理模块IPy¶
IP地址规划是网络设计中非常重要的一个环节,规划的好坏会直接影响路由协议算法的效率,包括网络性能、可扩展性等方面,在这个过程当中,免不了要计算大量的IP地址,包括网段、网络掩码、广播地址、子网数、IP类型等。Python提供了一个强大的第三方模块IPy(https://github.com/haypo/python-ipy/)
pip安装
pip3 install IPy
源码安装
# wget https://pypi.python.org/packages/source/I/IPy/IPy-0.81.tar.gz --no-check-certificate
# tar -zxvf IPy-0.81.tar.gz
# cd IPy-0.81
# python setup.py install
代码示例
#!/usr/bin/env python
# -*- coding:utf8 -*-
# @auther: 18793
# @Date: 2020/7/18 15:29
# @filename: 02_IPy_module.py
# @Email: 1879324764@qq.com
# @Software: PyCharm
from IPy import IP
ip_s = input('Please input an IP or net-range and mask: ')
ips = IP(ip_s)
print(ips.len())
IP_List = list(ip for ip in ips)
print("IP address list:", IP_List)
if len(ips) > 1:
print('net: %s' % ips.net())
print('netmask: %s' % ips.netmask())
print('broadcast: %s' % ips.broadcast())
print('reverse address: %s' % ips.reverseNames()[0])
print('subnet: %s' % len(ips))
else:
print('reverse address: %s' % ips.reverseNames()[0])
print('hexadecimal: %s' % ips.strHex())
print('binary ip: %s' % ips.strBin())
print('iptype: %s' % ips.iptype())
19.1.3. DNS处理模块dnspython¶
dnspython(http://www.dnspython.org/)是Python实现的一个DNS工具包,它支持几乎所有的记录类型,可以用于查询、传输并动态更新ZONE信息,同时支持TSIG(事务签名)验证消息和EDNS0(扩展DNS)。在系统管理方面,我们可以利用其查询功能来实现DNS服务监控以及解析结果的校验,可以代替nslookup及dig等工具,轻松做到与现有平台的整合,下面进行详细介绍。
pip安装
pip3 install dnspython
源码安装
# wget http://www.dnspython.org/kits/1.9.4/dnspython-1.9.4.tar.gz
# tar -zxvf dnspython-1.9.4.tar.gz
# cd dnspython-1.9.4
# python setup.py install
(1) A记录, 将主机转换为IP地址
#!/usr/bin/env python
# -*- coding:utf8 -*-
# @auther: 18793
# @Date: 2020/7/18 15:41
# @filename: 03.dns1.py
# @Email: 1879324764@qq.com
# @Software: PyCharm
import dns.resolver
domain = input('请输入域名地址:')
A = dns.resolver.query(domain, 'A')
for i in A.response.answer:
for j in i.items:
if j.rdtype == 1:
print(j.address)
print(A)
print(i)
print(i.items)
print(j)
print(j.rdtype)
print(j.address)
print(A.response.answer)
print(dns.resolver.query('www.baidu.com', 'A'))
(2)MX记录 (邮件交换记录,定义邮件服务器的域名)*
#!/usr/bin/env python
# -*- coding:utf8 -*-
# @auther: 18793
# @Date: 2020/7/18 15:47
# @filename: 03.dns2.py
# @Email: 1879324764@qq.com
# @Software: PyCharm
import dns.resolver
mx = dns.resolver.query('163.com', 'MX')
for i in mx.response.answer:
for j in i:
print(j)
(3)ns 记录 (标记区域的域名服务器及授权子域) 只限输入一级域名
ns= dns.resolver.query('baidu.com','NS')
for i in ns.response.answer:
for j in i:
print (j)
CNAME记录 (指别名记录,实现域名间的映射)
cname= dns.resolver.query('www.uwintech.cn','CNAME')
for i in cname.response.answer:
for j in i:
print (j)
代码示例
#!/usr/bin/python
import dns.resolver
import os
import httplib
iplist=[] #定义域名IP列表变量
appdomain="www.google.com.hk" #定义业务域名
def get_iplist(domain=""): #域名解析函数,解析成功IP将追加到iplist
try:
A = dns.resolver.query(domain, 'A') #解析A记录类型
except Exception,e:
print "dns resolver error:"+str(e)
return
for i in A.response.answer:
for j in i.items:
iplist.append(j.address) #追加到iplist
return True
def checkip(ip):
checkurl=ip+":80"
getcontent=""
httplib.socket.setdefaulttimeout(5) #定义http连接超时时间(5秒)
conn=httplib.HTTPConnection(checkurl) #创建http连接对象
try:
conn.request("GET", "/",headers = {"Host": appdomain}) #发起URL请求,添加host主机头
r=conn.getresponse()
getcontent =r.read(15) #获取URL页面前15个字符,以便做可用性校验
finally:
if getcontent=="<!doctype html>": #监控URL页的内容一般是事先定义好,比如“HTTP200”等
print ip+" [OK]"
else:
print ip+" [Error]" #此处可放告警程序,可以是邮件、短信通知
if __name__=="__main__":
if get_iplist(appdomain) and len(iplist)>0: #条件:域名解析正确且至少要返回一个IP
for ip in iplist:
checkip(ip)
else:
print "dns resolver error."