20200915

2020-09-15 15:52:42

点击上方蓝字“数据库干货铺” 解锁更多精彩内容

统计每天的数据量变化，数据量变动超过一定范围时，进行告警。

统计每天的数据量变化，数据量变动超过一定范围时，进行告警。告警通过把对应的参数传递至相应接口。

做一个工作日志，处理以上需求，考虑到要操作数据库，调用接口等操作，还是用python来写个简单的脚本。

主要涉及如下知识点：

python操作MySQL数据库
python调用接口

原数据波动使用grafana展示如下：

python程序示例如下：

#!/usr/bin/python# coding=utf-8import pymysql as mdbimport osimport sysimport requestsimport json

tar_conn = mdb.connect(host='192.168.56.128',port=3306,user='xxx',passwd='xxx123',db='bak_db')tar_cur = tar_conn.cursor()
v_sql_dt =" SELECT DATE_FORMAT(CURRENT_DATE(),'%Y-%m-%d')t1 ,DATE_FORMAT(SUBDATE(CURRENT_DATE(),INTERVAL 1 DAY),'%Y-%m-%d')t2,DATE_FORMAT(SUBDATE(CURRENT_DATE(),INTERVAL 1 WEEK),'%Y-%m-%d')t3,DATE_FORMAT(SUBDATE(CURRENT_DATE(),INTERVAL 1 MONTH),'%Y-%m-%d %H:%i:00')t4"v_extract_rows=tar_cur.execute(v_sql_dt)v_res=tar_cur.fetchone()v_dt1=v_res[0]v_dt2=v_res[1]v_dt3=v_res[2]v_dt4=v_res[3]
print  v_dt1,v_dt2,v_dt3,v_dt4#v_start_time='2020-09-10'#v_end_time='2020-09-11'def get_cnt(v_dt):
    v_sql1="select  tb_rows  from bak_db.tb_size   where  dt='%s';"%(v_dt)
    v_extract_rows=tar_cur.execute(v_sql1)    v_res=tar_cur.fetchone()    v_cnt1=v_res[0]
    return(v_cnt1)
(v_cnt_now)=get_cnt(v_dt1)(v_cnt_1d)=get_cnt(v_dt2)(v_cnt_1w)=get_cnt(v_dt3)(v_cnt_1m)=get_cnt(v_dt4)
def f_notify(v_cnt_now,v_cnt_before,v_message):    v_rate1=abs(((v_cnt_before-v_cnt_now)*1.00/v_cnt_before*1.00)*100)
#    print v_rate1,v_rate2    if  (v_rate1>100 ) and  (v_cnt_now>500 or v_cnt_before>500) :        v_level=1        v_list=[v_message,',','当前量：',str(v_cnt_now),',','前期量：',str(v_cnt_before)]        v_message1=''.join(v_list)        print v_message1        url = 'http://192.168.56.128:9000/api/v1/alarm'                               # 接口地址        body ={"level": v_level, "group": ["dba"], "msg": {"content": v_message1}}         headers = {'content-type': "application/json"}                             # 如有认证信息，添加认证信息即可，例如'Authorization': 'APP appid = xxx,token = xxxxxxxxxxxxxxxx'        response = requests.post(url, data = json.dumps(body), headers = headers)  # body是json格式的，用 json.dumps(body)方式进行处理        print response.text        print response.status_code            
f_notify(v_cnt_now,v_cnt_1d,'数据量与前一天相比波动超过')f_notify(v_cnt_now,v_cnt_1w,'数据量与前一周相比波动超过')f_notify(v_cnt_now,v_cnt_1m,'数据量与前一月相比波动超过')
tar_conn.close()