问小白 wenxiaobai
资讯
历史
科技
环境与自然
成长
游戏
财经
文学与艺术
美食
健康
家居
文化
情感
汽车
三农
军事
旅行
运动
教育
生活
星座命理

Grafana配置动态阈值,让你的门限实时更新

创作时间:
作者:
@小白创作中心

Grafana配置动态阈值,让你的门限实时更新

引用
CSDN
1.
https://blog.csdn.net/m0_71142057/article/details/140456380

Grafana作为常用的运维监控工具,其告警阈值的配置一直是一个痛点。本文将介绍如何通过MySQL、Grafana和Zabbix三个工具,实现动态阈值的配置,以解决固定阈值导致的大量无用告警问题。需要注意的是,本文内容基于2024年7月的技术环境,具体实现可能需要根据实际情况进行调整。

一、所需软件

  • MySQL:用于获取动态阈值
  • Grafana:监控工具,数据呈现
  • Zabbix:监控工具,数据获取

二、整体思路

  1. 将Zabbix监控项的内容通过SQL语句生成到一张表中,获取7天的数据,通过SQL生成每个时间点的平均值,存入固定表中。作为该监控项的动态阈值。
  2. 配置Grafana告警规则,使MySQL查询到的值作为阈值。

三、详细步骤

1. 将监控指标的7天平均值存入固定表中

因为监控项是一分钟一个值,所以取7天的数据,求取每个时间点的平均值作为该时间点的阈值。此处只展示阈值表的内容,未展示生成该表数据的SQL。

2. 配置Grafana监控规则

2.1 阈值的配置

选择需要配置阈值变量的仪表盘,点击图像上方的设置按钮,如下图,选择变量选项进行配置。

变量设置可以参考下图,更为具体的配置说明请自行网上搜索。

2.2 告警规则配置

进入仪表盘编辑界面,新建或修改告警规则。

进入告警规则编辑界面后,本规则需要配置5个表达式:

  1. 获取当前时间序列的监控值;
  2. 获取阈值;
  3. 格式化时间序列监控值;
  4. 比较监控值与阈值;
  5. 配置告警触发阈值。

1)获取当前时间序列的监控着。一般情况下这一步不需要配置,进入后默认已经具备。

2)点击Add query按钮,新增查询条件,配置阈值获取查询sql

3)点击Add expression按钮,增加计算表达式。将zabbix获取的原始数据格式化。

4)点击Add expression按钮,增加计算表达式。计算格式化后的值与阈值的差。

5)点击Add expression按钮,增加计算表达式。配置触发告警的条件。我这里配置的是当与阈值的差小于0时触发。

2.3 配置告警确认条件

我这里配置的是监控5分钟,每分钟监控一次。也就是说连续5次当前值小于阈值,则认为出现问题,进行告警。

到此,配置完成,里面的指标和频率需根据实际情况调整。




© 2023 北京元石科技有限公司 ◎ 京公网安备 11010802042949号