使用python搭建一个Linux服务器监控系统

简介: 使用python搭建一个Linux服务器监控系统

使用python搭建服务器的监控系统,先来说一下主要逻辑:

1、定时获取server(主机)的一些内存,CPU的信息

2、将获取的信息存储到数据库

3、读数据库,获取信息,将服务器的内存,CPU信息制作成图


首先我们来谈谈需要使用的东西:

mysql数据库一台

python3代码环境

pymysql

psutil

pyecharts


首先需要将mysql的环境搭建好,具体就不多说了,为server准备一个python环境,然后安装三个python包

使用pip进行安装:

pip install pymysql
pip install psutil
pip install pyecharts

安装好了我们就可以来获取服务器的一些内存,CPU的信息了。


我们主要使用psutil模块去获取服务器的一些实时的CPU和内存信息。

import psutil
mem = psutil.virtual_memory()
memtotal = mem.total
memfree = mem.free
mempercent = mem.percent
memused = mem.used


可以直接获取内存相关的一些信息,例如内存总量,使用了多少,空余多少等等。

还可以获取cpu的信息

cpu = psutil.cpu_percent(1)

我们可以将获取到到这些信息存到文件里或者是数据库里,这里我们方便读取制图我们就使用数据库进行存储。

首先🔗数据库,我们这边需要创建一个CPU数据,再创建一个stat表,表里有一下午字段:


640.png

可以直接使用建表语句:

create table stat(mem_free varchar(255),mem_usage varchar(255), mem_total varchar(255), mempercent varchar(255), cpu varchar(255),        time varchar(255) );


下面我们用python连接数据库:

import pymysql
db = pymysql.connect(user="root", passwd="root", db="CPU", host="127.0.0.1")
db.autocommit(True)
cur = db.cursor()


之后读取服务器的一些信息:

def getinfo():
    mem = psutil.virtual_memory()
    memtotal = mem.total
    memfree = mem.free
    mempercent = mem.percent
    memused = mem.used
    cpu = psutil.cpu_percent(1)
    return memtotal, memfree, memused, mempercent, cpu



然后每隔十秒获取一次服务器的信息,之后将这些信息插入到数据库中:

while True:
    try:
        memtotal, memfree, memused, mempercent, cpu = getinfo()
        t = int(time.time())
        sql = 'insert into stat (mem_free,' \
              'mem_usage,' \
              'mem_total,' \
              'mempercent,' \
              'cpu,' \
              'time) value (%s,%s,%s,%s,%s,%s)' % (
        memfree, memused, memtotal, mempercent, cpu, t)
        cur.execute(sql)
        time.sleep(10)
    except Exception as e:
        print(e)


这样我们就做到了持续不断的想数据库写入服务器的数据了。


第一步就算完成了。



下面一步我们需要通过读取数据库的服务器信息,绘制图表:

首先获取数据目前获取到的所有信息(但是在实际情况下我们需要获取什么时间段的信息就写那个时间段的信息,这时候就需要在sql语句中添加where条件了)。

db = pymysql.connect(user="root", passwd="root", db="test", host="127.0.0.1")
cur = db.cursor()
sql = 'select cpu from stat'
cur.execute(sql)
cpu_data = cur.fetchall()


我们画图的时候数据都是拼在一个list中,这时候我们就需要将CPU的数据做到list里面:

all_cpu = []
for cpu in cpu_data:
    cpu_num = eval(cpu[0])
    all_cpu.append(cpu_num)
print(all_cpu)

下面我们就可以使用pyecharts画图了:

首先定义横坐标的长度是要和CPU数据的量保持一致的,这个时候我们可以来写横坐标了:

x = [i for i in range(len(all_cpu))]

数据内容也有了,坐标也有了,下面我们来做图:


from pyecharts.charts import Line
line = (
    Line()
    .add_xaxis(x)
    .add_yaxis("CPUinfo", all_cpu)
    .set_global_opts(title_opts=opts.TitleOpts(title="CPUinfo"))
)

line.render()

这样就OK了!

运行一下代码来看看结果:


640.jpg

当然图还是可以优化的哈,我们可以将很坐标优化成时间的值,到数据库中获取,然后将他们于横坐标对应上,也是OK的。

当然,除了使用pyecharts画图,我们还有个神器大家别忘了呀:matplotlib

from matplotlib import pyplot as plt
............................................
plt.plot(all_cpu)
plt.show()


640.jpg


喜欢用哪个就看你们自己啦,小编更喜欢第一种。


下面再看看内存的使用量:

640.jpg

640.png



其实从这个图看了,matplotlib展示的效果会好一点,pyecharts的数据都粘到一起了,看不清楚(当然,这个肯定是可以优化的哦,大家可以去GitHub上找方法哟!https://github.com/pyecharts


想试试手的可以动起来了哦!

完整代码如下:

import psutil
import time
import pymysql
db = pymysql.connect(user="root", passwd="root", db="test", host="127.0.0.1")
db.autocommit(True)
cur = db.cursor()
def getinfo():
    mem = psutil.virtual_memory()
    memtotal = mem.total
    memfree = mem.free
    mempercent = mem.percent
    memused = mem.used
    cpu = psutil.cpu_percent(1)
    return memtotal, memfree, memused, mempercent, cpu
if __name__ == "__main__":
    while True:
        try:
            memtotal, memfree, memused, mempercent, cpu = getinfo()
            t = int(time.time())
            sql = 'insert into stat (mem_free,' \
                  'mem_usage,' \
                  'mem_total,' \
                  'mempercent,' \
                  'cpu,' \
                  'time) value (%s,%s,%s,%s,%s,%s)' % (
            memfree, memused, memtotal, mempercent, cpu, t)
            cur.execute(sql)
            time.sleep(10)
        except Exception as e:
            print(e)


from matplotlib import pyplot as plt
import pymysql
from pyecharts.charts import Line
from pyecharts import options as opts
db = pymysql.connect(user="root", passwd="root", db="test", host="127.0.0.1")
cur = db.cursor()
sql = 'select cpu from stat'
cur.execute(sql)
cpu_data = cur.fetchall()
all_cpu = []
for cpu in cpu_data:
    cpu_num = eval(cpu[0])
    all_cpu.append(cpu_num)
print(all_cpu)
# 使用pyecharts画图
x = [i for i in range(len(all_cpu))]
line = (
    Line()
    .add_xaxis(x)
    .add_yaxis("CPUinfo", all_cpu)
    .set_global_opts(title_opts=opts.TitleOpts(title="CPUinfo"))
)
line.render()
db.close()



大家也可以点击阅读原文,直获取代码。

相关文章
|
6月前
|
算法 搜索推荐 JavaScript
基于python智能推荐算法的全屋定制系统
本研究聚焦基于智能推荐算法的全屋定制平台网站设计,旨在解决消费者在个性化定制中面临的选择难题。通过整合Django、Vue、Python与MySQL等技术,构建集家装设计、材料推荐、家具搭配于一体的一站式智能服务平台,提升用户体验与行业数字化水平。
|
6月前
|
存储 分布式计算 大数据
基于Python大数据的的电商用户行为分析系统
本系统基于Django、Scrapy与Hadoop技术,构建电商用户行为分析平台。通过爬取与处理海量用户数据,实现行为追踪、偏好分析与个性化推荐,助力企业提升营销精准度与用户体验,推动电商智能化发展。
|
7月前
|
存储 安全 数据管理
基于python的在线考试系统
本系统基于Python开发,旨在通过信息化手段提升各行业数据管理效率。系统具备良好的安全性、稳定性及可扩展性,支持数据高效处理与决策支持,适用于教育、医疗、旅游等多个领域,助力办公自动化与科学化管理,显著提升工作效率并降低错误率。
|
6月前
|
机器学习/深度学习 大数据 关系型数据库
基于python大数据的台风灾害分析及预测系统
针对台风灾害预警滞后、精度不足等问题,本研究基于Python与大数据技术,构建多源数据融合的台风预测系统。利用机器学习提升路径与强度预测准确率,结合Django框架实现动态可视化与实时预警,为防灾决策提供科学支持,显著提高应急响应效率,具有重要社会经济价值。
|
6月前
|
机器学习/深度学习 大数据 关系型数据库
基于python大数据的青少年网络使用情况分析及预测系统
本研究基于Python大数据技术,构建青少年网络行为分析系统,旨在破解现有防沉迷模式下用户画像模糊、预警滞后等难题。通过整合多平台亿级数据,运用机器学习实现精准行为预测与实时干预,推动数字治理向“数据驱动”转型,为家庭、学校及政府提供科学决策支持,助力青少年健康上网。
|
7月前
|
Ubuntu 安全 关系型数据库
安装MariaDB服务器流程介绍在Ubuntu 22.04系统上
至此, 您已经在 Ubuntu 22.04 系统上成功地完成了 MariadB 的标准部署流程,并且对其进行基础但重要地初步配置加固工作。通过以上简洁明快且实用性强大地操作流程, 您现在拥有一个待定制与使用地强大 SQL 数据库管理系统。
412 18

热门文章

最新文章