美文网首页
python采集系统的基本性能

python采集系统的基本性能

作者: wokeman | 来源:发表于2019-03-17 15:21 被阅读0次

采集系统的基本性能信息包括CPU、内存、磁盘、网络等,可以完整描述当前系统的运行状态及质量。psutil模块已经封装了这些方法,用户可以根据自身的应用场景,调用相应的方法来满足需求,非常简单实用。

(1)CPU信息

Linux操作系统的CPU利用率有以下几个部分:

User Time,执行用户进程的时间百分比;

System Time,执行内核进程和中断的时间百分比;

Wait IO,由于IO等待而使CPU处于idle(空闲)状态的时间百分比;

Idle,CPU处于idle状态的时间百分比。

我们使用Python的psutil.cpu_times()方法可以非常简单地得到这些信息,同时也可以获取CPU的硬件相关信息,比如CPU的物理个数与逻辑个数,具体见下面的操作例子:

>>> import psutil

>>>psutil.cpu_times()#使用cpu_times方法获取CPU完整信息,需要显示所有逻辑CPU信息,

>>>#指定方法变量percpu=True即可,如psutil.cpu_times(percpu=True)

scputimes(user=38.039999999999999, nice=0.01, system=110.88, idle=177062.59, iowait=53.399999999999999, irq=2.9100000000000001, softirq=79.579999999999998, steal=0.0, guest=0.0)

>>>psutil.cpu_times().user    #获取单项数据信息,如用户user的CPU时间比

38.0

>>>psutil.cpu_count()    #获取CPU的逻辑个数,默认logical=True4

>>>psutil.cpu_count(logical=False)    #获取CPU的物理个数

2

>>>

(2)内存信息

Linux系统的内存利用率信息涉及total(内存总数)、used(已使用的内存数)、free(空闲内存数)、buffers(缓冲使用数)、cache(缓存使用数)、swap(交换分区使用数)等,分别使用psutil.virtual_memory()与psutil.swap_memory()方法获取这些信息,具体见下面的操作例子:

>>> import psutil

>>>mem = psutil.virtual_memory()   #使用psutil.virtual_memory方法获取内存完整信息

>>>mem

svmem(total=506277888L, available=204951552L, percent=59.5, used=499867648L, free=6410240L, active=245858304, inactive=163733504, buffers=117035008L, cached=81506304)

>>>mem.total    #获取内存总数

506277888L

>>>mem.free     #获取空闲内存数

6410240L

>>>psutil.swap_memory()    #获取SWAP分区信息sswap(total=1073733632L, used=0L, free=1073733632L, percent=0.0, sin=0, sout=0)

>>>

(3)磁盘信息

在系统的所有磁盘信息中,我们更加关注磁盘的利用率及IO信息,其中磁盘利用率使用psutil.disk_usage方法获取。磁盘IO信息包括read_count(读IO数)、write_count(写IO数)、read_bytes(IO读字节数)、write_bytes(IO写字节数)、read_time(磁盘读时间)、write_time(磁盘写时间)等。这些IO信息可以使用psutil.disk_io_counters()获取,具体见下面的操作例子:

>>>psutil.disk_partitions()    #使用psutil.disk_partitions方法获取磁盘完整信息

[sdiskpart(device='/dev/sda1', mountpoint='/', fstype='ext4', opts='rw'), sdiskpart(device='/dev/sda3', mountpoint='/data', fstype='ext4', opts='rw')]

>>>

>>>psutil.disk_usage('/')  #使用psutil.disk_usage方法获取分区(参数)的使用情况

sdiskusage(total=15481577472, used=4008087552, free=10687057920, percent=25.899999999999999)

>>>

>>>psutil.disk_io_counters()    #使用psutil.disk_io_counters获取硬盘总的IO个数、

                   #读写信息

sdiskio(read_count=9424, write_count=35824, read_bytes=128006144, write_bytes=204312576, read_time=72266, write_time=182485)

>>>

>>>psutil.disk_io_counters(perdisk=True)  #“perdisk=True”参数获取单个分区IO个数、

                             #读写信息

{'sda2': sdiskio(read_count=322, write_count=0, read_bytes=1445888, write_bytes=0, read_time=445, write_time=0), 'sda3': sdiskio(read_count=618, write_count=3, read_bytes=2855936, write_bytes=12288, read_time=871, write_time=155), 'sda1': sdiskio(read_count=8484, write_count=35821, read_bytes=123704320, write_bytes=204300288, read_time=70950, write_time=182330)}

(4)网络信息

系统的网络信息与磁盘IO类似,涉及几个关键点,包括bytes_sent(发送字节数)、bytes_recv=28220119(接收字节数)、packets_sent=200978(发送数据包数)、packets_recv=212672(接收数据包数)等。这些网络信息使用psutil.net_io_counters()方法获取,具体见下面的操作例子:

>>>psutil.net_io_counters()    #使用psutil.net_io_counters获取网络总的IO信息,默

                               #认pernic=False

snetio(bytes_sent=27098178, bytes_recv=28220119, packets_sent=200978, packets_recv=212672, errin=0, errout=0, dropin=0, dropout=0)

>>>psutil.net_io_counters(pernic=True)  #pernic=True输出每个网络接口的IO信息{'lo': snetio(bytes_sent=26406824, bytes_recv=26406824, packets_sent=198526, packets_recv=198526, errin=0, errout=0, dropin=0, dropout=0), 'eth0': snetio(bytes_sent=694750, bytes_recv=1816743, packets_sent=2478, packets_recv=14175, errin=0, errout=0, dropin=0, dropout=0)}

>>>

(5)其他系统信息

除了前面介绍的几个获取系统基本信息的方法,psutil模块还支持获取用户登录、开机时间等信息,具体见下面的操作例子:

>>>psutil.users()    #使用psutil.users方法返回当前登录系统的用户信息

[suser(name='root', terminal='pts/0', host='192.168.1.103', started=1394638720.0), suser(name='root', terminal='pts/1', host='192.168.1.103', started=1394723840.0)]

>>> import psutil, datetime

>>>psutil.boot_time()    #使用psutil.boot_time方法获取开机时间,以Linux时间戳格式返回

1389563460.0

>>>datetime.datetime.fromtimestamp(psutil.boot_time()).strftime("%Y-%m-%d %H:%M:%S")

'2014-01-12 22:51:00'    #转换成自然时间格式

---------------------

作者:在奋斗的大道

来源:CSDN

原文:https://blog.csdn.net/zhouzhiwengang/article/details/44779521

相关文章

  • python采集系统的基本性能

    采集系统的基本性能信息包括CPU、内存、磁盘、网络等,可以完整描述当前系统的运行状态及质量。psutil模块已经封...

  • Python中Requests库的用法

    前面讲了Python的urllib库的使用和方法,Python网络数据采集Urllib库的基本使用 ,Python...

  • 系统调用&信息采集器(轻量版)

    brave-collector-starter 代码地址:系统调用关系采集器(轻量版)&系统基本信息采集器 背景 ...

  • 方案

    硬件建议 配置 操作系统 用途 系统性能 流程 数据来源 数据采集(汇报)方式 溯源查询 数据分析

  • Python网络数据采集之图像识别与文字处理

    网络采集系列文章 Python网络数据采集之创建爬虫Python网络数据采集之HTML解析Python网络数据采集...

  • 大数据学习之:Flume

    flume作用 从磁盘采集文件发送到HDFS 数据采集来源:系统日志文件、Python爬虫数据、端口数据 数据发送...

  • Android Monitor实现

    数据的价值 APM 目标: 对应用的性能、业务可靠性进行线上的监控和预警 采集内容 系统指标,应用性能指标...

  • 2019年Python爬虫学习必看

    如果你用Python3写爬虫,强力推荐《Python网络数据采集》这本书,应该是目前最系统最完善介绍python爬...

  • 电压基准芯片的分类

    电压基准芯片(ADR431BRZ-REEL7)是一类高性能模拟芯片,常用在各种数据采集系统中,实现高精度数据采集。...

  • 2018最佳人工智能数据采集(爬虫)工具书下载

    Python网络数据采集 Python网络数据采集 - 2016.pdf 本书采用简洁强大的Python语言,介绍...

网友评论

      本文标题:python采集系统的基本性能

      本文链接:https://www.haomeiwen.com/subject/scsumqtx.html